Data engineer (Senior)
Требования
Местоположение и тип занятости
Компания
Описание вакансии
О компании и команде
Мы находимся в поиске Data engineer'a, который будет заниматься развитием направлений: "Цифровая аналитика", "Антифрод", " Платформа DataLake".
Ожидания от кандидата
-
Реализация ETL в Hadoop (с помощью Airflow);
-
Работа с различными источниками данных: Oracle, MS SQL, API личных кабинетов, микросервисы;
-
Батч и стримы с помощью PySpark и Kafka;
-
Подготовка витрин для анализа (Hive + Spark+ SQL);
Наш стек: Ванильный hadoop; Kafka, Spark, Airflow; ClickHouse; Jira; Confluence; GitLab
Мы ждем от будущих коллег:
-
Уверенное владение Python;
-
Опыт использования эко-системы Hadoop: HDFS, Apache AirFlow, Hive, Kafka, Spark;
-
Знание SQL;
-
Опыт работы с реляционными базами данных (Oracle);
Условия работы
- Формат работы на выбор (удаленный/гибридный/офисный);
Бонусы
- ДМС и другие опции в нашем кафетерии льгот;
- Полугодовые премии;
- Корпоративные скидки 30% на продукцию сети наших магазинов (Спортмастер, O`STIN, FUNDAY;
- Обучение - доступно внутреннее и внешнее обучение, посещаем внутренние конференции, проводим митапы;