M2M
Data Engineer
В архиве c 22 октября 2022
Удаленно
от 180 000 ₽
Задачи:
- Интеграция новой CRM системы
- Разрабатывать новые решения для обработки данных (ETL, конвейеры, службы интеграции, пакетная и потоковая обработка, службы обогащения и т. д.)
- Поддержка текущих решений для данных при создании новой платформы данных. Обеспечение плавного перехода от текущей архитектуры к целевой
- Построение инфраструктуры, необходимой для оптимального хранения данных, обработки данных и предоставления данных клиентам, возможность работы с данными (обработка, преобразование, объединение, выполнение ad-hocs, расчет) для команд
- Подготовка наборов данных из различных источников по запросу коллег
- Настройка мониторинга, определите SLA, анализ метрик доставки и обработки данных
- Разработка встроенного решение для сверки данных
- Сборка больших и сложных наборов данных, отвечающие функциональным/нефункциональным бизнес-требованиям (бизнес-кейсы)
- Повышать надежность, эффективность и качество данных
Требования:
- Опыт проектирования баз данных с помощью устройств массовой параллельной обработки: Druid, BigQuery, ClickHouse, PostgreSQL и т. п.
- Более 2-х лет практического опыта развертывания производственного кода качества
- Профессиональный опыт использования Python, Java или Scala для обработки данных (предпочтительно Python)
- Знание и опыт работы с пакетами Python, связанными с данными
- Практический опыт внедрения лучших практик ETL (или ELT) в масштабе
- Опыт работы с потоковыми технологиями, такими как Kafka, и технологиями платформ данных, такими как ClickHouse, MongoDB.
- Практический опыт работы с инструментами конвейера данных (Airflow, Luigi, Azkaban, dbt)
- Экспертное знание SQL и оптимизация запросов
- Git DVCS
- Soft Skills:
- Ориентация на детали и забота о качестве данных
- Умение работать со строгими сроками
- Вы умеете справляться с конструктивной критикой и умеете развивать отношения с командой для достижения общих целей
- Вы умеете внимательно слушать, и вы умеете убеждать и аргументировать
Мы предлагаем:
- Развитие: оплачиваем профильное обучение, конференции, курсы английского
- Свобода: удаленная работа, гибкий график, можно работать из дома или из коворкинга, затраты на который мы компенсируем
- Международный опыт: работа с коллегами из Европы, США и других стран, прокачка английского прямо на работе, по-настоящему международные продукты
- Забота: расширенный ДМС с первого дня работы, скидка на страхование членов семьи, корпоративный психолог, помощь в сложных жизненных обстоятельствах
Настя из careerspace
Поможем устроиться на эту работу или лучше!
Вакансия в архиве
Посмотрите похожие вакансии