A/B-тест: анализ CR с доверительными интервалами — АЛЬФА-БАНК

Условие задания

**Компания:** Альфа-Банк

**Результаты A/B-теста:**

| Метрика | Control (n=5 000) | Treatment (n=5 000) |
|---------|-------------------|---------------------|
| Конверсия (CR) | 4.2% (210 из 5000) | 4.8% (240 из 5000) |
| Средний чек (AOV) | 12 500 ₽ | 12 800 ₽ |

**Задание:**
1. Посчитайте uplift в CR и его доверительный интервал
2. Проведите z-тест для CR
3. Покажите байесовский подход: P(Treatment > Control)

Темы

доверительный интервал t-тест байесовский подход uplift

Подсказки

• Uplift = (p_T - p_C) / p_C в процентах
• CI для разности пропорций: (p_T - p_C) ± z * SE
• Для Байеса: Beta-биномиальная модель с неинформативным prior

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "A/B-тест: анализ CR с доверительными интервалами — АЛЬФА-БАНК"?

Это задание для уровня Senior. Senior-уровень — глубокое понимание темы, опыт решения нестандартных задач, обсуждение trade-off на собеседовании.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «A/B-тесты» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: доверительный интервал, t-тест, байесовский подход, uplift.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 30-60 минут с обсуждением подходов, оптимизаций и trade-off. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «A/B-тесты»?

На zasqlpython.ru есть другие задания в категории «A/B-тесты», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания