У тебя стат-тест с мощностью 30% при ожидаемом MDE 1%. Что это означает практически?
A/B тестыmediummiddle
Варианты ответа
Только 30% случаев когда реальный эффект 1% будет detected — 70% реальных улучшений мы пропустим. Нужно либо растить N, либо принять больший MDE, либо использовать CUPED для увеличения мощности
Тест сходится к правильному выводу в 30% случаев — статистическая значимость гарантирована но не всегда корректна, остальное это случайные совпадения
Эффект найден с вероятностью 30% независимо от его реального размера, это и есть проблема малой мощности — она не зависит от выборки
Тест ловит только 30% эффектов которые есть в популяции, поэтому надо повторять эксперимент 3-4 раза подряд чтобы увеличить шансы поймать эффект
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
2475 вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.