Network effects: switchback design vs cluster randomization

Senior A/B-тесты Marketplace

Условие задания

**Контекст:** Маркетплейс такси тестирует новый алгоритм ценообразования (surge pricing). Проблема: если поднять цену для части пользователей в одном районе, водители перемещаются в этот район, улучшая время подачи для тестовой группы и ухудшая для контрольной. Это нарушение SUTVA.

**Задание:**
1. Объясните, что такое SUTVA и почему оно нарушается в данном случае.
2. Опишите два подхода: switchback design и cluster (geo) randomization.
3. Для каждого подхода: как рандомизировать, какие метрики считать, какие ограничения.
4. Какой подход выберете для теста ценообразования и почему?
5. Как рассчитать размер выборки при кластерной рандомизации?

Темы

network effects SUTVA switchback design cluster randomization маркетплейс

Подсказки

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "Network effects: switchback design vs cluster randomization"?

Это задание для уровня Senior. Senior-уровень — глубокое понимание темы, опыт решения нестандартных задач, обсуждение trade-off на собеседовании.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «A/B-тесты» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: network effects, SUTVA, switchback design, cluster randomization, маркетплейс.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 30-60 минут с обсуждением подходов, оптимизаций и trade-off. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «A/B-тесты»?

На zasqlpython.ru есть другие задания в категории «A/B-тесты», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания