Data Engineer / ETL-developer

Обязанности:

• Разрабатывать ETL-процессы и фреймворки по загрузке данных в Data Lake и формировать витрины данных;
• Проектировать модели витрин данных в DWH;
• Разрабатывать процессы применения алгоритмов продвинутой аналитики;
• Исследовать и анализировать информационные потоки и данные;
• Разрабатывать сервисы управления процессами загрузки и схемы подключения новых источников данных в Data Lake;
• Документировать свою работу в Confluence.

Требования:

• Наличие опыта: Python, Apache Kafka, Airflow, Nifi. ETL;
• Опыт работы с «классической» РСУБД в качестве разработчика: знание SQL на продвинутом уровне, опыт оптимизации запросов;
• Будет плюсом опыт работы с не реляционными СУБД или БДВР;
• Опыт разработки и внедрения систем класса DWH, понимание концепции распределенных высоконагруженных систем хранения и обработки данных;
• Опыт в разработке сложных ETL процессов и их автоматизации;
• Опыт работы с оркестратором Apache Airflow или Apache NiFi;
• Понимание принципов работы с потоковым данными (Apache Kafka);
• Умение писать код на Python.

Условия:

• Оформление c первого рабочего дня в аккредитованную ИТ-компанию в соответствии с нормами ТК РФ, социальные гарантии;
• Крупные проекты в компании–лидере отрасли;
• Возможность модернизировать процессы реального производственного бизнеса в команде сильнейших экспертов;
• Полис ДМС (включая стоматологию);
• Удаленная работа;
• Доступ к корпоративной OnLine библиотеке;
• Обучение в программах Корпоративного университета;
• Корпоративный спорт, конференции, культурные мероприятия.