Почему нельзя «подглядывать» (peeking) в результаты A/B теста и останавливать при первом p < 0.05?

A/B тесты medium middle

Варианты ответа

Каждое подглядывание — дополнительная проверка гипотезы. При ежедневном peeking реальный false positive rate может достигать 20-30% вместо заявленных 5%
Подглядывание замедляет эксперимент
P-value не считается до достижения нужного sample size
Подглядывать можно — это стандартная практика

Разбор ответа

Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.

2475 вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.

Получить доступ к ответам — все вопросы →

Похожие вопросы из категории «A/B тесты»