Python Developer

О компании

• Мегафон.

Обязанности

• Проектирование, разработка, оптимизация и поддержка ETL процессов для загрузки данных из различных источников;
• Управление потоковой обработкой данных с использованием Apache Kafka;
• Разработка и оптимизация структур данных, схем и запросов в PostgreSQL;
• Построение, администрирование и тонкая настройка ClickHouse кластеров;
• Интеграция данных между PostgreSQL, Kafka, ClickHouse и другими компонентами инфраструктуры;
• Мониторинг производительности, отказоустойчивости и безопасности data pipeline и баз данных;
• Автоматизация процессов обработки данных и развертывания (CI/CD);
• Взаимодействие с аналитиками, разработчиками и product owner'ами.

Требования

• Опыт работы от 2-х лет на Python;
• Опыт разработки и администрирования ClickHouse;
• Глубокое понимание и практический опыт работы с Apache Kafka;
• Опыт работы с PostgreSQL;
• Понимание принципов построения ETL процессов;
• Знание SQL на продвинутом уровне;
• Понимание принципов DevOps.