Инженер DWH (Hadoop, AB Initio)
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
О проекте:
Нам вместе предстоит разработать и построить крупнейшее хранилище данных для всего банка и обеспечить надежный фундамент для всех видов аналитической отчетности Сбера.
Проект новый - в стадии формирования команды.
Стек: Hadoop, SQL, Spark, AB Initio.
Вам предстоит:
- Проектирование и разработка ETL- потоков с использованием AB Initio и других средств управления интеграцией данных
- Верификация задач, поставленных аналитиком;
- Поддержка внедрения функционала на этапах ПСИ;
- Описание предложений по техническому решению в задачах Jira;
- Проектирование решений по передаче и трансформации данных;
- Настройка и реализация систем мониторинга потоков данных
- Поддержка Dev(Sec)Ops в соответствии с методиками принятого производственного процесса Банка
Команда ожидает, что у Вас есть:
- Знания SQL не ниже среднего уровня
- Базовые навыки владения CLI Unix (Linux)
- Опыт разработки на любом языке программирования
- Общее понимание устройства хранилищ данных;
- Умение работать с большими объёмами данных;
- Преимуществом будет опыт работы с программными решениями на основе Hadoop, инструментами хранения и обработки распределенных и слабоструктурированных данных (HBase, Hive, Apache Spark, Spark Streaming), распределенными СУБД для обработки больших массивов информации (Greenplum, Cassandra).
- Знание общих подходов к оптимизации;
- Желательно опыт работы с ОД, облачными технологиями, средствами интеграции данных (DI), ETL средствами
Мы предлагаем:
- масштабные и высоконагруженные проекты с использованием новых технологий;
- команду профессионалов, готовых поделиться опытом и поддержать ваши инициативы;
- использование Agile-методологии;
- гибкий график;
- возможность удаленной работы;
- трудоустройство согласно трудовому кодексу
- оклад плюс премии по результатам работы
- огромные возможности для корпоративного обучения
- медицинскую страховку
- материальная поддержка в особых случаях
- скидки на продукты Сбербанка.