Streaming vs Batch: архитектурное решение

Условие задания

**Компания:** Тинькофф

**Контекст:** Команда антифрода просит аналитические данные в реальном времени: текущий объём транзакций, аномалии, подозрительные паттерны. Сейчас данные обновляются раз в час. Нужно решить: переводить всё на streaming или сохранить batch + добавить streaming-слой.

**Задание:**
1. Опишите три архитектуры: чистый Batch, Lambda (Batch + Streaming), Kappa (только Streaming)
2. Для каждой нарисуйте схему и укажите компоненты
3. Выберите архитектуру для антифрода и обоснуйте
4. Оцените стоимость и сложность поддержки каждого варианта

Темы

streaming batch архитектура Kafka Lambda

Подсказки

• Lambda: два пути (batch для точности, streaming для скорости), merge на выходе
• Kappa: один путь через streaming (Kafka + Flink), replay для исторических данных
• Для антифрода критичны latency и accuracy одновременно

Все тестовые задания →

Частые вопросы

Какой уровень знаний нужен для задачи "Streaming vs Batch: архитектурное решение"?

Это задание для уровня hard. Senior-уровень — глубокое понимание темы, опыт решения нестандартных задач, обсуждение trade-off на собеседовании.

На каких собеседованиях встречается такая задача?

Подобные задания в категории «data_engineering» регулярно дают на собеседованиях аналитика данных в Яндекс, Сбер, Ozon, Авито, Тинькофф, Wildberries, T-Bank, X5, ВТБ и других крупных IT-компаниях. Тематика: streaming, batch, архитектура, Kafka, Lambda.

Сколько времени даётся на решение?

На реальном собеседовании на подобную задачу отводится 30-60 минут с обсуждением подходов, оптимизаций и trade-off. Для тренировки рекомендуем сначала решить самостоятельно, потом сверить с эталонным решением и подсказками.

Где ещё потренироваться по теме «data_engineering»?

На zasqlpython.ru есть другие задания в категории «data_engineering», продуктовые кейсы, справочник метрик, AI мок-собеседование с разбором ваших ответов.

← Все задания