Разработчик Python (Big Data)

Местоположение и тип занятости

МоскваПолный рабочий деньМожно удаленно

Компания

Разработка ПО банковского сектора

Описание вакансии

Обязанности:

  • Разработка процессов загрузки данных из различных источников( RDBMS, файлы)
  • Проектирование и разработка процессов преобразования данных (ETL) для хранилища данных и платформы BigData;
  • Мониторинг и контроль качества, а также сроков доставки данных
  • Развитие платформы BigData

Требования:

  • Отличное знание Python, SQL, Bash, Git
  • Умение работать с инструментами CI/CD (git, jenkins, artifactory)
  • Опыт разработки ETL-процессов на одном из инструментов (Airflow, Pentaho, NiFi, Talend, Informatica)
  • Знание основных принципов разработки и построения хранилищ данных
  • Знание стека Hadoop (Hive, Spark, HDFS, Kafka, Flink) и опыт работы с большими объемами данных приветствуется

Плюсом будет:

  • Опыт работы с MPP-системами (Teradata, GreenPlum,Vertica)
  • Опыт работы с планировщиками задач (Airflow/Luigi/crontab)
  • Опыт создания REST сервисов
  • Опыт работы с Java, Scala, Spark, Kafka

Условия:

  • Официальное трудоустройство согласно Трудовому Кодексу
  • «Белая» заработная плата (оклад + квартальные премии)
  • Выплаты материальной помощи в особых/чрезвычайных ситуациях
  • Льготное кредитование
  • Наличие корпоративных спортивных команд: футбол, волейбол, хоккей, баскетбол, настольный теннис, бег
  • Добровольное медицинское страхование со стоматологией
  • Дисконт-программы от компаний партнеров (фитнес, страхование, туризм и т.д.)
  • Обучение в корпоративной бизнес-академии
  • "Релокационный пакет" (компенсация затрат на переезд и съем жилья первые три месяца)
  • Расположение офиса:м. Китай-город
  • График 5\2 с 9-18, пятница – сокращенный рабочий день