Senior Big Data Engineer (SQL, Spark, Scala) (to Lisbon)

Задачи

• Написание ETL процессов на Spark, PySpark, SQL
• Разработка архитектуры хранилища
• Помощь в подготовке аналитических отчетов
• Техническая проработка фичей на основе данных

Требования

• Владеете SQL на продвинутом уровне
• Работали с аналитическими БД (ClickHouse, Presto, Druid и т.д.)
• Имеете практический опыт с Scala или Java

Будет плюсом

• Есть опыт завершения крупных и сложных проектов
• Понимаете принципы обработки больших данных
• Знаете Python
• Работали с Map-Reduce решениями (Apache Spark, Hadoop Map Reduce, YT)
• Знакомы с облачными технологиями (EMR, Kubernetes, Databricks, Docker, Terraform и т.д.)
• Знакомы с планировщиками ETL процессов (Oozie, Airflow, Luigi и т.д.)

Условия работы:

• Гибкий график
• Возможность релокации в Лиссабон
• В Москве офис возле м.Белорусская
• Бесплатные обеды в офисе
• Медицинская страховка для сотрудников и их детей, а также 100% оплата больничных
• Корпоративное обучение: профессиональные мероприятия, тренинги, уроки английского и португальского языков
• Совместные путешествия с командой раз в год, выездные мероприятия и крутые тимбилдинги