Разработчик ETL (Middle)

Работа с данными:

• Разработка процессов загрузки данных из систем-источников в единый интеграционный слой (S3).
• Создание и поддержка репликаций на Hadoop.
• Настройка и поддержка пайплайнов ETL с использованием Apache Spark, Airflow.
• Работа с большими данными и оптимизация производительности процессов.

Работа с интеграцией:

• Взаимодействие с командами разработчиков и аналитиков для корректной загрузки и обработки данных.
• Документирование процессов и описание архитектуры ETL решений.

Требования:

• Опыт работы разработчиком SQL.
• Уверенные знания реляционных СУБД (PostgreSQL, ClickHouse).
• Опыт работы с Big Data и S3, MinIO + Iceberg / Hadoop + Hive.
• Опыт работы с Apache Spark и Airflow.
• Понимание принципов ETL и построения масштабируемых потоков данных.
• Внимание к деталям и ответственность за качество данных.

Будет преимуществом:

• Опыт построения ETL процессов для финансовых, производственных или e-commerce систем.
• Знакомство с инструментами автоматизации и мониторинга данных.
• Опыт работы в распределенных командах и Agile-проектах.

Мы предлагаем:

• Удалённый формат работы.
• Белую заработную плату, оформление по ТК РФ.
• Комфортный старт: 3 месяца плавного онбординга с поддержкой HR.
• Поддержку: IT-отсрочка, консультации HR и юристов.
• Прозрачные процессы и открытую коммуникацию.
• Современное оборудование без логирования времени - фокус на доверии и результате.
• ДМС за счет компании.
• Профессиональное развитие: индивидуальный план обучения, конференции и митапы.
• Развитие личного бренда: выступления, публикации, экспертные активности.
• Бенефиты: регулярное обновление корпоративных скидок.
• Корпоративную жизнь: онлайн и оффлайн мероприятия, мерч, конкурсы и челленджи.