Yandex Маркет: запускаем «связанные товары» в карточке
Средний
Маркетплейс
Recommendations
45 мин
Pre-launch experiment design
Ситуация: Команда хочет добавить блок «вместе с этим покупают» в карточку товара. Дизайнить A/B и метрики.
Аналитик: «как замерим успех, какие будут primary/secondary, на какой sample, сколько недель?». PM хочет «запустить через 2 недели на 50% юзеров».
Доступные данные
product_views: user_id, listing_id, ts, source
add_to_cart: user_id, listing_id, ts, source_block (related/main/search)
orders: order_id, user_id, items, gmv, ts
sessions: user_id, ts, depth, items_viewed
Задачи
- Определить primary metric: GMV per user (не CTR блока — может быть каннибализация).
- Secondary: items per order, % мульти-итемных корзин, conversion rate из view в order.
- Guardrails: latency страницы, % страниц без блока (нет good recs), bounce rate.
- Размер sample: ожидаемый эффект +1.5% GMV/user, σ известна → MDE формула, 14 дней на 50/50 split.
- Риски: каннибализация других блоков (рекомендации в корзине, поиск).
- План анализа: t-test/Mann-Whitney для GMV, χ² для конверсии, CUPED для уменьшения дисперсии.
Все кейсы для подготовки →
← Все кейсы