Я.Драйв: подписка на премиум-машины — A/B test design

Средний Мобильность Premium 45 мин A/B-test design

Ситуация: Подписка 5990 ₽/мес — доступ к Tesla и BMW. Как тестировать.

Маленький target audience (~3% юзеров). Сложный B2C product.

Доступные данные

rentals: user_id, ts, car_class
premium_lookups: user_id, ts, car_id
subscription_signups: user_id, ts, plan

Задачи

Targeting: показывать предложение только тем кто кликал на премиум-машины.
Sample size: при targeting 30K eligible, MDE ~2 п.п.
Длительность: 30 дней (subscription решение медленное).
Primary: subscription signups (+ retention 30d).
Guardrail: per-rental revenue не упал (caннибализация per-trip).

Все кейсы для подготовки →

Жанр кейса: A/B-тест: design + анализ — все кейсы этого типа.

Как разбирать A/B-тест: design + анализ кейсы

Что спрашивают на A/B-кейсах?

Дизайн теста (primary metric, guardrails, sample size, длительность), анализ результатов (significance, segments, novelty effect) и interpretation для бизнеса.

Какие типичные ошибки в A/B?

Peeking (стоп при «явной победе»), без guardrails, без power analysis, игнорирование novelty effect, SRM не проверяется, p-hacking при extend.

Что такое CUPED?

Variance reduction: используем pre-experiment данные юзера для корректировки в-experiment метрики. Сокращает sample size в 1.5-2 раза при тех же MDE.

← Все кейсы

Я.Драйв: подписка на премиум-машины — A/B test design

Доступные данные

Задачи

Как разбирать A/B-тест: design + анализ кейсы

Похожие задачи на собеседованиях

Похожие кейсы (Мобильность)