Социальная платформа: рост watch time при ухудшении качества контента
Сложный
Социальные сети
55 мин
Primary vs Guardrail
Ситуация: Watch time +7%, report rate +18%, жалобы в поддержку выросли.
Нужно решить, выпускать ли обновление на всю аудиторию (rollout), если в долгую оно может ухудшить качество контента.
Доступные данные
feed_impressions: user_id, post_id, rank_score, shown_at, model_variant
engagement: user_id, post_id, watch_time_sec, likes, shares
quality: post_id, report_flag, hide_flag, moderation_action
support: user_id, ticket_type, created_at
Задачи
- Собрать дерево метрик: primary, guardrail, long-term.
- Проверить гетерогенный эффект по сегментам пользователей.
- Сформировать пороги автопаузы релиза.
- Предложить, как поменять цель алгоритма ранжирования, чтобы не терять качество контента.
Все кейсы для подготовки →
← Все кейсы