Data engineer

Мы находимся в поиске Data engineer'a, который будет заниматься развитием направлений : "Цифровая аналитика" "Антифрод", "Инфраструктура DataLake".

Ваши задачи:

• Реализация ETL в Hadoop (с помощью Airflow).

• Работа с различными источниками данных: Oracle,MS SQL API личных кабинетов, микросервисы.

• Батч и стримы с помощью PySpark и Kafka.

• Подготовка витрин для анализа (Hive + Spark+ SQL)

Наш стек: Cloudera hadoop; Kafka, Spark, Airflow; Jira; Confluence; GitLab

Мы ждем от будущих коллег:

• Уверенное владение Python.
• Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka,Spark.
• Знание SQL
• Опыт работы с реляционными базами данных (Oracle).

Став частью Sportmaster Lab, вы получите:

• До окончания пандемии работаем удаленно, после - преимущественно удаленная работа.
• Достойную зарплату, а также бонусы по итогам полугодия (в размере 50% от суммы ежемесячного дохода).
• ДМС, включая стоматологию.
• Постоянное развитие: T-Shape в новые стеки, профессии, продукты. Оплачиваемые курсы, внутренняя библиотека.
• Персонального куратора, начиная с первого дня работы.
• Дисконтную карту 30% на продукцию магазинов сети.
• Корпоративные скидки на различные виды страхования и кредитования.
• Корпоративные программы и специальные предложения для спорта и фитнеса: World Class,X-fit,Alex Fitness, FITMOST.
• Корпоративные скидки для отдыха: современный картинг "Primo karting", веревочный парк и скалодром «Энергия высоты», онлайн-игры "Квиз, плиз!".
• Корпоративные скидки для отпуска и командировки: отельный комплекс Mriya Resort & SPA, отель Marco Polo Saint-Petersbur, гостиничный комплекс "Имеретинский", cеть санаториев АО «РЖД-Здоровье».
• Корпоративные тарифы на сотовую связь: Мегафон, Билайн.
• Cкидки от партнеров: каршеринг Делимобиль, интернет магазины "Samsung", SimpleWine, Комус.