← Все вакансии/Senior/Яндекс
SeniorHybridМосква, Санкт-Петербург

Data Engineer

Я
Яндекс
Уровень
Senior
Формат
Hybrid
О роли

Описание вакансии

О компании

Инфраструктура Яндекса — технологии, системы и сервисы, на которых работают все продукты компании. Команда продуктовой аналитики превращает данные о процессе разработки в решения для развития внутренних сервисов. Фокус — экономия железа, AI readiness и качественные продуктовые запуски.

Обязанности
  • Разработка ETL-процессов на внутренних инструментах с использованием Python и YQL
  • Проектирование сущностей из данных и создание витрин для аналитики и ML
  • Проработка интеграций с десятками систем-источников, хранение данных в различных базах и форматах
  • Оптимизация кода для быстрой обработки больших объёмов данных
  • Улучшение существующих ETL-процессов и ускорение запросов
  • Построение метрик стабильности и процессов для работы с ростом масштаба
  • Проектирование архитектуры для кросс-ДЦ-отчётности
Требования
  • Отличное владение Python и SQL
  • Опыт проектирования и развития DWH или аналитических платформ
  • Глубокое понимание устройства распределённых систем
  • Опыт работы с большими объёмами данных
Условия
  • Офис или гибридный формат
  • Работа с системами, обрабатывающими петабайты данных и держащими нагрузку в десятки тысяч RPS
Стек и навыки

С чем работаем