Top.Mail.Ru
M2M

Data Engineer

В архиве c 22 октября 2022
Удаленно
от 180 000 ₽

Задачи:

  • Интеграция новой CRM системы
  • Разрабатывать новые решения для обработки данных (ETL, конвейеры, службы интеграции, пакетная и потоковая обработка, службы обогащения и т. д.)
  • Поддержка текущих решений для данных при создании новой платформы данных. Обеспечение плавного перехода от текущей архитектуры к целевой
  • Построение инфраструктуры, необходимой для оптимального хранения данных, обработки данных и предоставления данных клиентам, возможность работы с данными (обработка, преобразование, объединение, выполнение ad-hocs, расчет) для команд
  • Подготовка наборов данных из различных источников по запросу коллег
  • Настройка мониторинга, определите SLA, анализ метрик доставки и обработки данных
  • Разработка встроенного решение для сверки данных
  • Сборка больших и сложных наборов данных, отвечающие функциональным/нефункциональным бизнес-требованиям (бизнес-кейсы)
  • Повышать надежность, эффективность и качество данных

Требования:

  • Опыт проектирования баз данных с помощью устройств массовой параллельной обработки: Druid, BigQuery, ClickHouse, PostgreSQL и т. п.
  • Более 2-х лет практического опыта развертывания производственного кода качества
  • Профессиональный опыт использования Python, Java или Scala для обработки данных (предпочтительно Python)
  • Знание и опыт работы с пакетами Python, связанными с данными
  • Практический опыт внедрения лучших практик ETL (или ELT) в масштабе
  • Опыт работы с потоковыми технологиями, такими как Kafka, и технологиями платформ данных, такими как ClickHouse, MongoDB.
  • Практический опыт работы с инструментами конвейера данных (Airflow, Luigi, Azkaban, dbt)
  • Экспертное знание SQL и оптимизация запросов
  • Git DVCS
  • Soft Skills:
  • Ориентация на детали и забота о качестве данных
  • Умение работать со строгими сроками
  • Вы умеете справляться с конструктивной критикой и умеете развивать отношения с командой для достижения общих целей
  • Вы умеете внимательно слушать, и вы умеете убеждать и аргументировать

Мы предлагаем:

  • Развитие: оплачиваем профильное обучение, конференции, курсы английского
  • Свобода: удаленная работа, гибкий график, можно работать из дома или из коворкинга, затраты на который мы компенсируем
  • Международный опыт: работа с коллегами из Европы, США и других стран, прокачка английского прямо на работе, по-настоящему международные продукты
  • Забота: расширенный ДМС с первого дня работы, скидка на страхование членов семьи, корпоративный психолог, помощь в сложных жизненных обстоятельствах
Настя из careerspace
Настя из careerspace
Поможем устроиться на эту работу или лучше!

Вакансия в архиве

Посмотрите похожие вакансии