Data engineer команды DWH

• Работа с КХД: анализ исходных данных в различных системах, анализ исходных данных, изучение документации, проверка качества данных
• Загрузка, очистка и трансформация больших объемов данных из различных источников (Реляционные базы данных, Hadoop, плоские файлы) в рабочую область КХД (платформы Oracle, GreenPlum, Hadoop)
• Контроль качества загружаемых данных, разработка автоматизированных инструментов для оценки качества данных
• Мониторинг и оптимизация процессов загрузки, преобразования данных
• Разработка инструментов для автоматизации рутинных задач, связанных с обработкой данных
• Взаимодействие с аналитиками и DE продуктовых команд и другими разработчиками КХД;
• Разработка прототипов витрин, кубов, отчетов средствами SQL, ETL и Python;
• Разработка иных инструментов для аналитической платформы: мониторинг нагрузки, карта данных, автоматизация рутинных операций.

Основные требования:

• Базовые знания БД: SQL, PK, FK, индекс, партиция, 3 НФ;
• Навыки работы с РСУБД: Greenplum, Oracle, PostgreSQL, MS SQL;
• Навыки разработки хранилища данных: таблицы фактов, расчет метрик, построение справочников, время зависимые структуры, rowstore/columnstore, кубы;
• Опыт работы с ETL-инструментами (Informatica, Apache Airflow и подобные);
• Навыки оптимизации запросов: хинты, план выполнения, партиции, индексы.
• Желательно знание основных понятий и концепций из области Data Warehousing

Дополнительные (будет преимуществом)

• Знание Python;
• Навыки работы с Hadoop: Hive, Impala, Spark;
• Опыт в тестировании/проверке качества данных;
• Знание розничного банковского бизнеса;
• Опыт работы по Agile (SCRUM, Kanban, и т.д.)

Мы ценим своих сотрудников и предлагаем:

• Курсы повышения квалификации несколько раз в год;
• Возможность посещения (как в качестве слушателя, так и в качестве выступающего) всероссийских и международных IT-конференций;
• График работы – стандартный, но с гибким подходом, сокращенный рабочий день в пятницу (до 16.45);
• ДМС для сотрудников и скидки на медицинскую страховку для родственников;
• Работа в команде профессионалов, возможность разрабатывать уникальные и крупные проекты масштаба нашей страны;
• Большой и комфортный офис со спортзалом, кинозалом, библиотекой, столами для пинг-понга, кафе для сотрудников;
• Широкий спектр дисконт–программ, скидок и привилегий от компаний-партнеров;
• Льготное кредитование в Сбербанке – возможность пользоваться премиальными продуктами Банка на специальных условиях;
• Материальная помощь – в радостных и не очень случаях.