Data Engineer (Big Data Platform team)

Основные задачи на позиции:

• разработка и поддержка инфраструктуры для хранения и обработки данных на базе hadoop;
• оптимизация вычислений и работа с узкими местами платформы;
• разработка и развитие инструментария для работы с каталогом метаданных;
• развитие и поддержка кластера hadoop.

Для этого тебе понадобится:

• от 2х лет опыта коммерческой разработки;
• коммерческий опыт работы с Spark от 2х лет;
• коммерческий опыт разработки на Python;

Будет плюсом:

• опыт работы с Docker и docker-compose, умение писать и оптимизировать dockerfile;
• опыт работы с Unix-подобными системами на уровне уверенного пользователя или администратора.
• опыт работы с планировщиками задач (Airflow, Cron);
• опыт работы с Vertica;
• понимание принципов построения сервисов.

Что мы предлагаем:

• удаленная работа и/или комфортный офис в центре Москвы с зонами отдыха, безлимитным чаем/кофе и питанием;
• гибридный формат работы: удалённо, из офиса или оба варианта;
• гибкий график — мы не требуем в 9:00 быть в сети или в офисе. Можешь начинать работать в комфортное для тебя время;
• интересные амбициозные задачи, которые выведут тебя на новый профессиональный уровень;
• обучение: семинары, тренинги, конференции. Если ты сам хочешь выступать на конференциях — поможем всё организовать;
• ДМС;
• корпоративный английский, а также скидки на SkyEng;
• крутые активности с коллегами: киновечера, викторины, тематические вечеринки, ежегодные выезды на природу, игры в футбол/волейбол;
• корпоративные скидки на отели и другие услуги;
• молодая активная команда классных специалистов.