**Контекст:** Маркетплейс электроники провёл A/B-тест двух вариантов страницы товара. Вариант B содержит видеообзор вместо статичных фотографий. Продакт-менеджер спрашивает: «Видео работает — два из трёх показателей улучшились, а один даже значим. Раскатываем?»
**Данные:**
Результаты эксперимента (10 дней):
| Метрика | Группа A (фото) | Группа B (видео) |
|---------|-----------------|------------------|
| Посетители | 25 000 | 25 000 |
| Добавили в корзину | 2 750 | 2 925 |
| Оформили заказ | 1 125 | 1 200 |
| Средний чек | 4 800 ₽ | 4 650 ₽ |
Результаты аналитика:
- CR (add-to-cart): p-value = 0.037
- CR (purchase): p-value = 0.142
- Средний чек: p-value = 0.089
**Задание:**
1. Рассчитайте конверсии и изменения по каждой метрике
2. Объясните, что означает p-value простым языком
3. Почему нельзя просто посмотреть на p-value < 0.05 по одной из метрик?
4. Какую рекомендацию вы дадите и почему?
A/B-тест p-value ошибка первого рода ошибка второго рода принятие решений
Это задание для уровня Junior. Подходит для начинающих аналитиков, проверяет базовые знания SQL/Python/статистики.
Подобные задания в категории «A/B-тесты» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: A/B-тест, p-value, ошибка первого рода, ошибка второго рода, принятие решений.
На реальном собеседовании на подобную задачу отводится 5-10 минут — проверяется скорость и базовая грамотность. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.
На zasqlpython.ru есть другие задания в категории «A/B-тесты», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.
← Все задания