Разработчик Python (Big Data)
Требования
Местоположение и тип занятости
Компания
Разработка ПО банковского сектора
Описание вакансии
Условия работы
Обязанности:
- Разработка процессов загрузки данных из различных источников( RDBMS, файлы)
- Проектирование и разработка процессов преобразования данных (ETL) для хранилища данных и платформы BigData;
- Мониторинг и контроль качества, а также сроков доставки данных
- Развитие платформы BigData
Требования:
- Отличное знание Python, SQL, Bash, Git
- Умение работать с инструментами CI/CD (git, jenkins, artifactory)
- Опыт разработки ETL-процессов на одном из инструментов (Airflow, Pentaho, NiFi, Talend, Informatica)
- Знание основных принципов разработки и построения хранилищ данных
- Знание стека Hadoop (Hive, Spark, HDFS, Kafka, Flink) и опыт работы с большими объемами данных приветствуется
Плюсом будет:
- Опыт работы с MPP-системами (Teradata, GreenPlum,Vertica)
- Опыт работы с планировщиками задач (Airflow/Luigi/crontab)
- Опыт создания REST сервисов
- Опыт работы с Java, Scala, Spark, Kafka
Условия:
- Официальное трудоустройство согласно Трудовому Кодексу
- «Белая» заработная плата (оклад + квартальные премии)
- Выплаты материальной помощи в особых/чрезвычайных ситуациях
- Льготное кредитование
- Наличие корпоративных спортивных команд: футбол, волейбол, хоккей, баскетбол, настольный теннис, бег
- Добровольное медицинское страхование со стоматологией
- Дисконт-программы от компаний партнеров (фитнес, страхование, туризм и т.д.)
- Обучение в корпоративной бизнес-академии
- "Релокационный пакет" (компенсация затрат на переезд и съем жилья первые три месяца)
- Расположение офиса:м. Китай-город
- График 5\2 с 9-18, пятница – сокращенный рабочий день