Множественное тестирование: коррекция Бонферрони — Яндекс

Условие задания

**Компания:** Яндекс
**Позиция:** Продуктовый аналитик, Senior

**Кейс:** Вы тестируете 5 метрик одновременно в A/B тесте (CTR, CR, AOV, Revenue, Bounce). Уровень значимости α = 0.05.

**Вопросы:**
1. Какова вероятность хотя бы одного ложноположительного результата?
2. Как скорректировать α?
3. Какие альтернативы Бонферрони?

Темы

A/B тест множественное тестирование Бонферрони Яндекс

Подсказки

• P(≥1 FP) = 1 − (1−α)^k
• Бонферрони: α_adj = α/k
• Альтернативы: Holm-Bonferroni, FDR (Benjamini-Hochberg)

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "Множественное тестирование: коррекция Бонферрони — Яндекс"?

Это задание для уровня Senior. Senior-уровень — глубокое понимание темы, опыт решения нестандартных задач, обсуждение trade-off на собеседовании.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «A/B-тесты» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: A/B тест, множественное тестирование, Бонферрони, Яндекс.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 30-60 минут с обсуждением подходов, оптимизаций и trade-off. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «A/B-тесты»?

На zasqlpython.ru есть другие задания в категории «A/B-тесты», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания