Как мониторить ML-модель в production и обнаруживать деградацию?

Варианты ответа

• Мониторить data drift (PSI, KS-test), concept drift (метрики качества на свежих данных), prediction drift. Alert при выходе за пороги
• Если модель обучена — она работает вечно
• Достаточно мониторить accuracy раз в год
• ML-мониторинг не нужен для аналитических моделей

Разбор ответа

Получить доступ к ответам — все вопросы →

Похожие вопросы из категории «ML»

• Как диагностировать переобучение модели и какие приёмы помогают его предотвратить?
• Перечислите основные способы регуляризации и объясните, когда применять каждый.
• Объясните разницу между precision и recall.
• Как выбрать между ROC-AUC и PR-AUC для оценки модели классификации?
• В чём принцип градиентного бустинга и почему он так популярен в продуктовой аналитике?