Эксперт ETL (DataOps)
Зарплата
от 180 000 ₽
Требования
Местоположение и тип занятости
Компания
Лидер алмазодобывающей отрасли мира, российская горнорудная компания с государственным участием
Описание вакансии
О компании и команде
АЛРОСА ИТ – основана в 2019 году, как дочерняя компания АК «АЛРОСА» ПАО для поддержания его ИТ функций. Для этого мы фокусируемся на задачах бизнеса, создаем продукты с помощью ИТ.
В связи с появлением новых проектов, мы формируем новую команду и ищем Экспертf ETL (DataOps)!
Ожидания от кандидата
Наши задачи:
- Разработка и поддержка автоматизированных ETL/ELT процессов;
- Интеграция источников данных в Data Lake;
- Сбор, обработка и парсинг "сырых" данных;
- Написание сервисов для работы с внешними источниками/потребителями данных;
- Создание инфраструктуры передачи больших данных;
- Обработка и аркестрация данных при помощи Spark и Airflow, NiFi и аналоги;
- Обработка real-time данных;
- Написание ТЗ для DevOps, DevSecOps, Data Ingineer;
- Развитие систем управления данными, систем ETL и BI отчетности.
Ожидания от кандидата:
- Опыт проектирования и разработки архитектуры БД;
- Опыт работы c MPP системами (Greenplum);
- Опыт разработки Python и Java/Scala;
- Опыт разработки сложных SQL запросов;
- Опыт работы с ETL инструментами;
- Опыт работы и понимание принципов оптимизации структур данных, потоков данных и алгоритмов;
- Опыт проектирования и реализации загрузки и преобразования данных.
Условия работы
- Трудоустройство с первого дня, полное соблюдение ТК РФ;
- Обучение за счет компании;
- Возможность работать удаленно;
- ДМС.