Что делать с сетевыми эффектами (network effects) в A/B тесте?
A/B тестыhardsenior
Варианты ответа
Использовать кластерную рандомизацию (по городам, графам), switchback-дизайн или ego-network рандомизацию, т.к. стандартный user-level сплит даёт смещённую оценку
Игнорировать — при достаточной выборке network-эффекты усреднятся по обеим группам симметрично, и оценка treatment effect останется корректной по закону больших чисел
Увеличить выборку в 10 раз — это компенсирует контаминацию между группами и восстановит валидность оценок за счёт снижения дисперсии и повышения мощности теста
Использовать только байесовский подход — Bayesian inference естественно учитывает сетевые зависимости через иерархические модели, поэтому SUTVA становится не нужной
Разбор ответа
Подробный разбор с объяснением «почему правильный ответ верный» и почему остальные неверны — после регистрации.
2475 вопросов с разбором, quiz-режим с проверкой, AI-собес и подготовка к интервью аналитика.