Data engineer

Продукт Градостроительство внедряет новые технологии и оптимизирует бизнес-процессы градостроительного комплекса Москвы, чтобы сделать его эффективнее. Коллеги сокращают число задействованных инфосистем, переводят услуги в цифровой вид, разрабатывают цифрового двойника города и реализуют множество других проектов, помогающих отрасли работать качественнее и быстрее.

Команда растет и мы в поисках инженера данных.

• Обязателен опыт работы с Apache Airflow, Apache NiFi
• Знание и опыт разработки Python
• Продвинутые знания SQL: умение составлять, анализировать и оптимизировать запросы для реляционной БД
• Знание и опыт работы c MPP системами (Greenplum)
• Навыки разработки технической документации будет плюсом.

Что нужно делать:

• Построение ETL-процессов поставки данных с помощью NiFi и Airflow
• Сопровождение, поддержка и оптимизация разработанного функционала, устранение сбоев в ETL-процессах, расчетах промышленных витрин данных
• Подготовка и прохождение приемо-сдаточных испытаний разработанного функционала аналитической отчетности
• Анализ требований к витринам данных (взаимодействие с владельцем продукта, BI-разработчиками);
• Сбор информации по источникам данных и их структуре для последующей интеграции
• Развитие стандарта управления данными
• Взаимодействие с подрядчиками
• Оптимизация времени и сложности ETL-процессов расчета

• Масштабные задачи
• Значимая роль в команде экспертов, в которой коллеги всегда обмениваются опытом
• Оформление в соответствии с ТК РФ, официальная заработная плата
• Скидки на ДМС.