Описание вакансии
О компании и команде
Дивизион разработки и тестирования в поисках дата-инженера для разработки системы инвентаризации и логистики, создания витрин данных и преобразования больших объемов данных.
Ваши задачи
- Обеспечить сбор и организовать процесс загрузки данных в аналитические системы из различных источников.
- Подготавливать, очищать и предобрабатывать данные из внешних источников, построение агрегатов.
- Разрабатывать процедуры формирования детального слоя данных и слоя витрин DataLake.
- Реализовывать мониторинг разработанных процессов обработки данных (Grafana, Prometheus).
- Документировать свою работу в Confluence.
Ожидания от кандидата
- Знания принципов работы БД, построения ХД.
- Опыт разработки ETL процессов (NiFi, AirFlow).
- Опыт работы с высоконагруженными распределёнными системами обработки и хранения данных, очередями (Kafka).
- Отличное знание SQL.
Условия работы
- Возможность работать удаленно или в офисе на ваш выбор.
- Сильная команда экспертов.
- Личный наставник, помогающий погрузиться в проект.