⭐️ Бэкендеры, с какой командой у вас мэтч? Проверяйте на Вайб-чеке → vibe.habr.com

Data engineer (Senior)

Местоположение и тип занятости

Полный рабочий деньМожно удаленно

Компания

ИТ-компания в составе группы компаний «Спортмастер»

Описание вакансии

О компании и команде

Мы находимся в поиске Data engineer'a, который будет заниматься развитием направлений: "Цифровая аналитика", "Антифрод", " Платформа DataLake".

Ожидания от кандидата

  • Реализация ETL в Hadoop (с помощью Airflow);

  • Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;

  • Батч и стримы с помощью PySpark и Kafka;

  • Подготовка витрин для анализа (Hive + Spark+ SQL);

Наш стек: Ванильный hadoop; Kafka, Spark, Airflow; ClickHouse; Jira; Confluence; GitLab

Мы ждем от будущих коллег:

  • Уверенное владение Python;

  • Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;

  • Знание SQL;

  • Опыт работы с реляционными базами данных (Oracle);

Условия работы

  • Формат работы на выбор (удаленный/гибридный/офисный);

Бонусы

  • ДМС и другие опции в нашем кафетерии льгот;
  • Полугодовые премии;
  • Корпоративные скидки 30% на продукцию сети наших магазинов (Спортмастер, O`STIN, FUNDAY;
  • Обучение - доступно внутреннее и внешнее обучение, посещаем внутренние конференции, проводим митапы;