Data Engineer

Обязанности:

• построение витрин данных (Hive-SQL, Spark) с погружением в бизнес-процессы и аналитику данных;
• уточнение требований заказчика, системный анализ, изучение бизнес-процессов систем источников;
• поддерживать и тестировать витрины данных;
• настраивать ETL процесс загрузки данных из первоисточников;
• осуществлять постановку требований и приемку прототипов к единому хранилищу данных;
• выстраивание процессов Data Governance на инфраструктуре Hadoop совместно с CDO Банка;
• контроль качества данных в хранилище (Hadoop) – постановка задач, анализ;
• участие в проектах связанных с витринами данных, банковским хранилищем, MLOps.

Требования:

• высшее образование;
• опыт работы с ИТ-системами и базами данных от 3 лет по направлению крупных корпоративных клиентов и клиентов МСБ
• желателен опыт работы в банковской сфере от 1 года;
• T-SQL, PL-SQL, Hadoop на продвинутом уровне (опыт создания сложных запросов, постановка процедур на расписание, администрирование БД);
• Python (знание основных библиотек для работы с данными);
• уверенные знания основных банковских процессов (достаточно одного): кредитование, процессинг, депозиты; работа системным аналитиком будет преимуществом;
• уверенные знания SQL;
• знание планировщиков процессов (AirFlow, Oozie);
• опыт работы с BI системами и средствами визуализации;