Как рассчитать размер выборки для A/B теста с конверсией 5% и MDE 10% relative (т.е. хотим детектировать рост до 5.5%)?
A/B тестыhardsenior
Варианты ответа
Подставить в формулу: $n \geq \frac{(z_{0.975} + z_{0.80})^2 \cdot 2\hat{p}(1-\hat{p})}{(MDE_{abs})^2}$, где $MDE_{abs} = 0.005$, $\hat{p} = 0.05$, что даёт ~60 000 на группу
Достаточно 1000 пользователей на группу для любого MDE
Размер выборки не зависит от базовой конверсии
Нужно просто запустить тест на неделю и посмотреть результат
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
2475 вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.