Я.Лавка: дизайн карточки товара — A/B показал ничью

Ситуация: A/B на 4 недели: control vs new design. CR одинаковая, AOV ±0.5%. Что делать?

Продукт настаивает на новый дизайн. Аналитик подозревает: где-то есть segment-effect.

Доступные данные

• ab_assignments: user_id, variant
• orders: order_id, user_id, ts, amount, items_count
• user_segments: user_id, age_bucket, lifetime_orders, region

Задачи

• Сегмент-анализ: новые юзеры vs returning.
• Среза по device: mobile vs desktop.
• Возрастной срез.
• Heterogeneous treatment effect (HTE) analysis.
• Может, в одной группе сильный плюс, в другой минус — null в среднем.

Все кейсы для подготовки →

Жанр кейса: A/B-тест: design + анализ — все кейсы этого типа.

Как разбирать A/B-тест: design + анализ кейсы

← Все кейсы