Data Engineer

О компании

• Альфа-Банк — работодатель нового поколения

Обязанности

• Разработка, поддержка и доработка batch-пайплайнов данных
• Поддержка и развитие DAG'ов в Airflow
• Работа со Spark и Hadoop: настройка, запуск и оптимизация расчётов, разбор проблем производительности и стабильности
• Разработка выгрузок, витрин данных и внутренних утилит для аналитиков и Data Science-команды
• Рефакторинг существующего кода
• Техническая коммуникация с аналитиками и Data Science

Требования

• Высшее техническое образование
• Опыт работы python-разработчиком/дата-инженером
• Уверенный Python 3: production-код, работа с файлами, конфигурациями, логированием, обработкой ошибок
• Опыт работы с Hadoop-экосистемой
• Практический опыт со Spark: DataFrame API, джойны, партиционирование, оптимизация
• Практический опыт с Airflow: создание и сопровождение DAG'ов, зависимости, расписания, перезапуски, обработка ошибок
• Уверенное владение Git
• SQL для аналитических и ETL-задач
• Способность самостоятельно разобраться в новом коде, пайплайне или технологии

Условия

• Стабильный и прозрачный доход, размер обсуждается по итогам собеседования
• Удалённый формат работы
• Сложные задачи с большим массивом данных, тренинги и вебинары
• Доступ к корпоративным библиотекам Альпины и бизнес-изданий, скидки на курсы иностранных языков
• Карьерный рост
• Дружелюбная команда профессионалов
• ДМС, скидки на фитнес, фитнес-зал в офисе
• Скидки на услуги туристических агентств, рестораны, магазины и салоны красоты