Расчёт размера выборки для A/B-теста

Условие задания

**Контекст:** SaaS-платформа планирует провести A/B-тест нового онбординга. Текущая конверсия из регистрации в оплату — 5%. Продуктовая команда хочет зафиксировать `MDE` в 1 п.п. (с 5% до 6%).

**Данные:** параметры планируемого эксперимента:
- Текущая конверсия: `p₁ = 5%`
- Ожидаемая конверсия: `p₂ = 6%`
- Уровень значимости: `α = 0.05` (двусторонний тест)
- Мощность: `1 − β = 0.80`

**Задание:**
1. Рассчитайте необходимый размер выборки на каждую группу.
2. Если сайт получает 500 регистраций в день, сколько дней займёт эксперимент?
3. Что произойдёт, если увеличить требуемую мощность до 0.90?
4. Как `MDE` влияет на длительность теста?

Темы

A/B-тест power analysis MDE размер выборки мощность теста

Подсказки

• Формула: n = (Z_{α/2} + Z_β)² × (p₁(1−p₁) + p₂(1−p₂)) / (p₂ − p₁)²
• Z_{0.025} = 1.96, Z_{0.20} = 0.842, Z_{0.10} = 1.282
• Общее число участников = 2 × n (по n на каждую группу)

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "Расчёт размера выборки для A/B-теста"?

Это задание для уровня Junior. Подходит для начинающих аналитиков, проверяет базовые знания SQL/Python/статистики.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «A/B-тесты» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: A/B-тест, power analysis, MDE, размер выборки, мощность теста.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 5-10 минут — проверяется скорость и базовая грамотность. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «A/B-тесты»?

На zasqlpython.ru есть другие задания в категории «A/B-тесты», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания