Инженер DWH (Hadoop, AB Initio)

Требуемые навыки

БэкендСредний (Middle) · Dwh · Etl · SQL · Большие данные

Местоположение и тип занятости

Новосибирск · Полный рабочий день

Компания

Крупнейший транснациональный и универсальный банк Российской Федерации

Описание вакансии

О проекте:

Нам вместе предстоит разработать и построить крупнейшее хранилище данных для всего банка и обеспечить надежный фундамент для всех видов аналитической отчетности Сбера. 

Проект новый - в стадии формирования команды. 

Стек: Hadoop, SQL, Spark, AB Initio.

Вам предстоит:

  • Проектирование и разработка ETL- потоков с использованием AB Initio и других средств управления интеграцией данных
  • Верификация задач, поставленных аналитиком;
  • Поддержка внедрения функционала на этапах ПСИ;
  • Описание предложений по техническому решению в задачах Jira;
  • Проектирование решений по передаче и трансформации данных;
  • Настройка и реализация систем мониторинга потоков данных
  • Поддержка Dev(Sec)Ops в соответствии с методиками принятого производственного процесса Банка

Команда ожидает, что у Вас есть:

  • Знания SQL не ниже среднего уровня
  • Базовые навыки владения CLI Unix (Linux)
  • Опыт разработки на любом языке программирования
  • Общее понимание устройства хранилищ данных;
  • Умение работать с большими объёмами данных;
  • Преимуществом будет опыт работы с программными решениями на основе Hadoop,  инструментами хранения и обработки распределенных и слабоструктурированных данных (HBase, Hive, Apache Spark, Spark Streaming), распределенными СУБД для обработки больших массивов информации (Greenplum, Cassandra). 
  • Знание общих подходов к оптимизации;
  • Желательно опыт работы с ОД, облачными технологиями, средствами интеграции данных (DI), ETL средствами

Мы предлагаем:

- масштабные и высоконагруженные проекты с использованием новых технологий;

- команду профессионалов, готовых поделиться опытом и поддержать ваши инициативы;

- использование Agile-методологии;

- гибкий график;

- возможность удаленной работы;

- трудоустройство согласно трудовому кодексу

- оклад плюс премии по результатам работы   

- огромные возможности для корпоративного обучения

- медицинскую страховку

- материальная поддержка в особых случаях

- скидки на продукты Сбербанка.

Ваш отклик

Авторизуйтесь
Откликаться на вакансии могут только зарегистрированные пользователи.