Data Engineer (Python)

Мы создаем собственную batch ETL платформу с Apache Airflow под капотом, предназначенную для доставки результатов сложных аналитических расчетов пользователям.

Задачи

• Участие в разработке платформы для сбора и загрузки информации из разных систем DWH в общее хранилище (python + Airflow + PostgreSQL)
• Анализ метаданных исходных систем и разработка процессов загрузки этой информации
• Проектирование и доработка метаданных DWH
• Участие в разработке API для интеграции общего хранилища метаданных с другими системами DWH (например, Zeppelin)

Требования

• Знание Python
• Опыт работы с библиотеками pandas и numpy
• Базовые знания SQL
• Опыт написания процессов загрузки данных (ETL)

Мы предлагаем

• Профессиональное развитие: проводим митапы, тренинги и мастер-классы, огромная tech-библиотека в твоем распоряжении
• Компенсацию обедов или такси
• Заботу о здоровье: полис ДМС и страховка от несчастных случаев для тебя и льготные условия страхования для близких
• Компенсацию затрат на спорт: возвращаем 50% от стоимости абонемента
• Гибкий рабочий график с началом работы с 8:00 до 11:00
• Достойную твоего профессионального уровня зарплату, размер обсудим на собеседовании