ETL - разработчик / Data engineer

18 января 2022

Требования

Разработчик баз данных, Средний (Middle) • ETL • DWH • Apache Hadoop

Местоположение и тип занятости

Москва • Полный рабочий день

Компания

Сбер

Крупнейшая цифровая платформа. Технобренд, объединяющий лучшие мировые практики и самый современный стек

Описание вакансии

Условия работы

SberData – департамент по управлению данными всего Сбербанка. SberData строит централизованное хранилище данных, объем которого уже превышает 10 ПБ. Это продуктово-ориентированная инженерная команда с функциями развития выделенных технологических направлений, отражающих новый подход Сбербанка к данным и к применению AI.

Проект: Создание масштабного хранилища данных, на базе которого будет совершена революция в области построения ключевой отчетности Сбера!

Наша команда находится в поисках Разработчика ETL/ Data engineer.

Задачи:

Участие в создании хранилища данных Сбербанка в роли разработчика;
Проектирование и разработка потоков данных, алгоритмов загрузки и обработки данных в Hadoop;
Выстраивание и оптимизация производительности ETL-потоков;
Выстраивание зависимостей загрузок;
Формирования совместно с архитектором стандартов разработки;
Участие в пилотировании новых инструментов разработки в роли разработчика;
Взаимодействие с разработчиками со стороны подрядчика.

Требования:

Высшее техническое\математическое образование;
Знание принципов построения распределенных систем хранения и обработки данных;
Опыт работы с экосистемой Hadoop (HDFS, Hive, Spark, Impala);
Опыт работы с реляционными СУБД (Oracle, MS SQL);
Знание SQL, PL/SQL, навыки оптимизации запросов;
Навыки работы с Unix shell, системами версионирования кода.

Преимуществом будет:

Опыт работы на проектах построения хранилищ данных в роли разработчика ETL, опыт работы с промышленными ETL-инструментами;
Опыт программирования на Scala/Java;
Опыт работы с Jira, Confluence, Bitbucket/Git;
Понимание подходов DevOps;
Знание английского языка на уровне Upper-Intermediate и выше (готовности вести переписку, участвовать во встречах).

Бонусы

Гибкий график для оптимального баланса работы и личной жизни;
Бесплатный фитнес-зал в БЦ;
Профессиональное обучение, семинары, тренинги, конференции, корпоративная библиотека;
ДМС, страхование жизни;
Самые инновационные, амбициозные проекты и задачи;
Свободный дресс-код;
Льготные кредиты и корпоративные скидки.