A/B-тест: lift по метрикам и peeking-диагностика

Условие задачи

Таблицы ab_users (user_id, variant, assigned_at TEXT) и daily_metrics (user_id, metric_date TEXT, revenue REAL, sessions INTEGER). Посчитайте кумулятивный lift (разницу средних) теста vs контроля по дням от начала эксперимента. Выведите experiment_day, control_avg_revenue, test_avg_revenue, lift_pct (округлить до 2), cumulative_control_users, cumulative_test_users.

Схема данных

CREATE TABLE ab_users (user_id INTEGER PRIMARY KEY, variant TEXT, assigned_at TEXT);
CREATE TABLE daily_metrics (id INTEGER PRIMARY KEY, user_id INTEGER, metric_date TEXT, revenue REAL, sessions INTEGER);

Темы

CTE JOIN JULIANDAY CASE WHEN AVG COUNT DISTINCT NULLIF

Подсказки

• experiment_day = julianday(metric_date) - julianday(start_date) + 1
• Lift = (test_avg - control_avg) / control_avg * 100

Что проверяет эта задача

Задача «A/B-тест: lift по метрикам и peeking-диагностика» учит решать задачи по теме «A/B-тестирование» так, как это спрашивают на собеседовании аналитика данных. Такие задачи регулярно дают на собеседованиях аналитиков данных. Уровень сложный — задача проверяет глубину и умение собрать запрос из нескольких приёмов.

Как подступиться к решению

Сначала разберись со схемой данных и пойми, какой результат нужен на выходе. Определи, какие таблицы и поля задействованы, и собирай запрос пошагово: фильтрация → соединение или группировка → итоговый отбор и сортировка. Проверь результат на крайних случаях — NULL, дубликаты, пустые группы. Свой запрос сразу прогоняешь автопроверкой в интерактивной SQL-песочнице на реальной базе (SQLite и PostgreSQL 16 прямо в браузере).

Разбор темы с примерами — в гайде «A/B-тестирование в SQL». Хочешь системно с нуля — пройди бесплатный курс «SQL с нуля».

Решить в интерактивной SQL-песочнице → ← Все SQL-задачи