Middle Data Engineer
Требования
Местоположение и тип занятости
Компания
ИТ-компания в составе группы компаний «Спортмастер»
Описание вакансии
О компании и команде
Мы находимся в поиске Data Engineer, который будет заниматься развитием направлений: "Цифровая аналитика", "Антифрод", " Платформа DataLake".
Ваши задачи:
- Реализация ETL в Hadoop (с помощью Airflow);
- Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
- Батч и стримы с помощью PySpark и Kafka;
- Подготовка витрин для анализа (Hive + Spark+ SQL).
Наш стек: Ванильный hadoop; Kafka, Spark, Airflow; ClickHouse; Jira; Confluence; GitLab.
Ожидания от кандидата
- Уверенное владение Python;
- Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka,Spark;
- Знание SQL;
- Опыт работы с реляционными базами данных (Oracle).
Условия работы
- Формат работы на выбор: удаленка/офис/гибрид;
- Полугодовые премии;
- Скидка 30% на товары в магазинах сети (Спортмастер, O'STIN, FunDay);
- Обучение и сертификация за счет компании (онлайн-школы английского языка Skyeng и Language Link, корпоративная библиотека Alpina Digital, дистанционное образование от университета «Синергия»;
- Кафетерий льгот (возможен выбор опций: ДМС, спорт, английский).