Разработчик ETL
Требования
Местоположение и тип занятости
Компания
Крупнейшая банковская программа лояльности, созданная для клиентов ПАО «Сбербанк»
Описание вакансии
Условия работы
Мы - команда DWH в «СберСпасибо». В связи с расширением команды мы ищем data engineer - гуру данных и маэстро etl.
Обязанности:
тебе предстоит, а мы поможем:
- Настроить пайплайн автоматической проверки качества данных;
- Написать скрипты для загрузки новых источников;
- Перевести штатные процедуры и рутинную работу в Airflow;
- Создать витрины для команды розницы и product analysis;
- Оптимизировать ежедневную загрузку хранилища;
- Подружить процессы выгрузок данных из DWH с Kafka.
Требования:
- Высшее профильное (инженерное) образование. Что мы ожидаем от тебя?
- Крепкие знания SQL (оптимизация запросов, физические соединения таблиц);
- Опыт работы с промышленными ETL (SAS DI как преимущество, Informatica, ODI, DataStage);
- Понимание принципов проектирования хранилищ данных;
- Опыт работы с MPP (GP как преимущество) / колоночными СУБД (Clickhouse как преимущество);
- Опыт работы в Linux на уровне пользователя;
- Опыт работы разработчиком DWH от 1,5 лет.
Было бы здорово, если ты:
- знаком с Python и Git;
- имеешь представление (или практический опыт работы) об Airflow;
- слово Kafka для тебя не в новинку, либо ты не прочь разобраться что это такое.
Бонусы
- Социальный пакет ДМС и НС;
- Конкурентная заработная плата;
- Премия;
- Льготные условия для потребительского и ипотечного кредитования.
Если ты любишь автоматизировать рутинные процессы, понимаешь как оптимальнее выстроить процесс загрузки данных в хранилище и готов обучаться новому - мы ждём тебя в «СберСпасибо»!