Top.Mail.Ru
СБЕР

Стажер Data engineer (scala)

Москва
48 000 - 68 000 ₽

Эта система признана одной из лучших в мире:

  • 17th Annual 2021 Cyber Security Global Excellence Awards winners.

Fraud Prevention GOLD WINNER - SberBank Anti-Fraud System

  • Fraud Prevention Editor’s Choice – SberBank

Обязанности

  • Разработка новых, развитие и оптимизация существующих ETL/ELT процессов;
  • Автоматизация процессов предотвращения мошенничества;
  • Интеграция новых источников данных;
  • Анализ доступных источников данных и информации в них, оценка качества для решения задач;
  • Обсуждение задач и методов их решения совместно с фрод-аналитиками и бизнес-заказчиками;
  • Создание систем автоматизированного анализа данных;
  • Создание архитектур БД

Требования

  • Опыт построения ETL/ELT процессов;
  • Практический опыт с Scala/Java/Python;
  • Знание SQL на среднем уровне и выше;
  • Знание английского языка для чтения документации и статей;

Будет плюсом:

  • Опыт работы с Hadoop (Spark, HDFS, Hive, YARN), знание лучших практик по работе с инструментами;
  • Знание Scala;
  • Опыт работы с Clickhouse
  • Опыт работы с оркестраторами: Oozie, Airflow;
  • Опыт работы с моделями машинного обучения, понимание основ ML;
  • Опыт работы по Agile методологиям (Scrum/Kanban);
  • Опыт использования Jira, Confluence.

Условия

  • Молодая и активная команда, состоящая преимущественно из DS и DE.
  • Наличие мощного кластера и сред разработки.
  • Возможность поработать с действительно большими объемами данных и сделать значимый вклад в борьбу с мошенничеством в стране.

Отклик