Разработчик ETL (Data Инженер)
Требования
Местоположение и тип занятости
Компания
Международная компания, специализирующаяся на консалтинге, технологических услугах и аутсорсинге
Описание вакансии
Условия работы
Мы находимся в поисках Разработчика ETL на проект в крупный банк.
Удаленная работа с 10 до 19.
Проект: развитие платформы больших данных. Мы ищем опытных специалистов, профессионалов в работе с данными.
Сейчас нам нужен Разработчик ЕТL на создание аналитических платформ и data-продуктов для разных направлений корпоративно-инвестиционного бизнеса Банка.
Команда платформы консолидирует данные из различных внешних и внутренних источников, запускает пилотные проекты и обогащает данными в соответствии с требованиями бизнес-заказчиков
Основные задачи:
- Миграционные задачи: перенос существующих витрин на фреймворк SDP Hadoop
- Развитие и внедрение продуктов Сбербанка
Требования:
- Опыт работы от 2х лет;
- Навыки программирования на Java;
- Наличие практического опыта работы 1-3 года с Hadoop (Hive, Impala, sqoop, oozie, HDFS, YARN), понимание парадигмы map-reduce и алгоритмов работы Spark;
- Опыт работы с ETL-инструментами (Informatica BDM, ODI, Pentaho) и BI-средствами;
- Опыт программирования и разработки алгоритмов и структур данных;
- Понимание как оптимизировать ETL процессы;
- Фундаментальные знания принципов построения распределенных систем хранения и обработки данных.
Желательно:
- Опыт работы с реляционными СУБД (Oracle, MS/SQL), навыки оптимизации запросов;
- Опыт работы с NoSQL базам данных (HBase, Cassandra);
- Опыт работы с Unix shell;
- Jenkins;
Условия:
- Возможность профессионального и карьерного роста в компании, возможность поучаствовать в разных проектах;
- Опыт работы в распределенной команде профессионалов;
- Уровень заработной платы обсуждается индивидуально;
- Возможность работать удаленно