Дизайн метрики успеха для функции поиска

Условие задания

## Контекст

Ты аналитик в соцсети / медиа-платформе. Команда поиска запускает обновлённый поиск (новый ранкинг + автодополнение). Руководитель спрашивает: «Как мы поймём, что **поиск стал лучше**? Какую метрику успеха возьмём?»

Наивный ответ «число поисков выросло» — ловушка: рост поисков может означать, что юзеры **не находят с первого раза** и ищут снова.

**Задача:** предложи метрику(и) успеха для поиска, объясни почему она отражает реальную ценность, и какие сигналы покажут, что поиск стал хуже (хотя метрика растёт).

Темы

дизайн метрики метрика успеха поиск success-metric прокси-метрика

Подсказки

• «Успех поиска» = юзер быстро нашёл то, что искал, и пошёл дальше. Думай про метрики удовлетворённого намерения, а не объёма.
• Остерегайся обманчивых метрик: рост числа поисков и долгое время на странице результатов могут означать ПЛОХОЙ поиск (не нашёл с первого раза).
• Предложи прокси-метрику успешного клика (например, клик по результату без быстрого возврата — «long click») + guardrail на пере-поиски.

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "Дизайн метрики успеха для функции поиска"?

Это задание для уровня Middle. Для middle-аналитиков с опытом 1-3 года, требует уверенного владения темой и понимания edge cases.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «Продуктовые задачи» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: дизайн метрики, метрика успеха, поиск, success-metric, прокси-метрика.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 15-30 минут — оцениваются подход, корректность, обработка edge cases. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «Продуктовые задачи»?

На zasqlpython.ru есть другие задания в категории «Продуктовые задачи», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания