Байесовский подход к A/B-тесту даёт «вероятность того, что вариант B лучше A = 92%». Что это значит и можно ли раскатывать?
Статистикаmediummiddle
Варианты ответа
P(B > A | данные) = 92%. Можно раскатывать, если это выше бизнес-порога (обычно 95%). В отличие от p-value, это прямая вероятность — не требует интерпретации через null hypothesis
Эта величина эквивалентна frequentist p-value = 0.08 — не достигнут порог 95% confidence, эффект не является статистически значимым, поэтому вариант B нельзя раскатывать
92% — это конверсия у варианта B на тестовой аудитории за период эксперимента, классическая product-метрика без привязки к статистическому подходу или методу анализа
Байесовский подход в принципе не применим к A/B-тестам: он работает только для задач с явным приором (клинические испытания, финансы), а не для продуктовых экспериментов
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
2475 вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.