Инженер DWH (Hadoop, AB Initio)

О проекте:

Нам вместе предстоит разработать и построить крупнейшее хранилище данных для всего банка и обеспечить надежный фундамент для всех видов аналитической отчетности Сбера. 

Проект новый - в стадии формирования команды. 

Стек: Hadoop, SQL, Spark, AB Initio.

Вам предстоит:

• Проектирование и разработка ETL- потоков с использованием AB Initio и других средств управления интеграцией данных
• Верификация задач, поставленных аналитиком;
• Поддержка внедрения функционала на этапах ПСИ;
• Описание предложений по техническому решению в задачах Jira;
• Проектирование решений по передаче и трансформации данных;

• Настройка и реализация систем мониторинга потоков данных

• Поддержка Dev(Sec)Ops в соответствии с методиками принятого производственного процесса Банка

Команда ожидает, что у Вас есть:

• Знания SQL не ниже среднего уровня
• Базовые навыки владения CLI Unix (Linux)
• Опыт разработки на любом языке программирования
• Общее понимание устройства хранилищ данных;
• Умение работать с большими объёмами данных;
• Преимуществом будет опыт работы с программными решениями на основе Hadoop,  инструментами хранения и обработки распределенных и слабоструктурированных данных (HBase, Hive, Apache Spark, Spark Streaming), распределенными СУБД для обработки больших массивов информации (Greenplum, Cassandra). 
• Знание общих подходов к оптимизации;
• Желательно опыт работы с ОД, облачными технологиями, средствами интеграции данных (DI), ETL средствами

Мы предлагаем:

- масштабные и высоконагруженные проекты с использованием новых технологий;

- команду профессионалов, готовых поделиться опытом и поддержать ваши инициативы;

- использование Agile-методологии;

- гибкий график;

- возможность удаленной работы;

- трудоустройство согласно трудовому кодексу

- оклад плюс премии по результатам работы   

- огромные возможности для корпоративного обучения

- медицинскую страховку

- материальная поддержка в особых случаях

- скидки на продукты Сбербанка.