О команде
Мы строим платформу потоковой обработки данных, на которой работают критичные real-time-системы Авито: антибот, антифрод, рекламная аналитика, маркетинговые триггеры и CDC-пайплайны. Работаем в двух направлениях: продуктовые задачи и платформа (оператор Flink на Kubernetes, инфраструктура деплоя, миграции).
Обязанности
- Развивать real-time антибот и антифрод: детектировать ботов и фрод с помощью потоковых эвристик, разрабатывать новые сигналы
- Развивать обогащение событий: строить операторы обогащения кликстрим-событий (геолокация, категории, атрибуты пользователя, рекламные метрики)
- Развивать CDC и data ingestion: разрабатывать пайплайны захвата изменений из БД и доставки данных в DWH в формате Apache Paimon
- Развивать рекламную аналитику: считать CTR impressions, auction withdrawals и маркетинговые конверсии в реальном времени
- Развивать Flink Platform: управлять Flink Kubernetes Operator, Helm-чартами, деплоями в нескольких дата-центрах и регионах
- Обеспечивать техническое лидерство команды: задавать архитектурные стандарты и помогать команде расти
Требования
- Глубокая экспертиза в Apache Flink или другом фреймворке потоковой обработки данных (Spark Streaming, Kafka Streams)
- Опыт руководства командой разработки от 4-х лет
- Системный подход к работе с людьми (мотивация, развитие, адаптация)
- Опыт работы с высоконагруженными продакшен-системами
- Умение декомпозировать задачи и выстраивать технические процессы
Условия