Онлайн-кинотеатр: новый ранжировщик увеличил просмотры, но ухудшил оценки контента

Ситуация: Watch time вырос на 5%, но доля негативных оценок контента выросла на 14%.

Нужно пересмотреть цель алгоритма ранжирования (что именно он оптимизирует) и выбрать безопасный поэтапный запуск.

Доступные данные

• impressions: user_id, content_id, shown_at, model_variant, rank_score
• consumption: user_id, content_id, watch_time_sec, completed
• feedback: user_id, content_id, rating, dislike_flag
• retention: user_id, d7, d30

Задачи

• Построить дерево метрик: вовлеченность, качество, удержание.
• Проверить эффект по жанрам и сегментам аудитории.
• Предложить подход, где алгоритм учитывает сразу несколько целей: просмотры, качество и удержание.
• Сформировать поэтапный запуск с условиями остановки.

Все кейсы для подготовки → ← Все кейсы