Data Engineer
Требования
Местоположение и тип занятости
Компания
Команда разработки ведущего e-com в России
Описание вакансии
Условия работы
Для усиления направления клиентской аналитики маркетплейса нужен Data Engineer, который сможет взять на себя часть непрофильной для аналитиков работы по автоматизации отчётов, превращению моделей в сервисы, оптимизации запросов, а также сможет выстроить процесс код ревью, CI\CD Pipeline.
Наш стек: MPP (Vertica, ClickHouse), Python+ Airflow, Hive, PySpark.
Вам предстоит:
- Автоматизация результатов работ команд аналитики и data science;
- Проектирование и разработка витрин данных для анализа и моделирования;
- Оптимизация процессов ETL, система мониторинга обновления витрин и источников данных;
- Изучение способов повышения качества и надёжности данных;
- Предоставление экспертной поддержки по оптимизации обработки данных на клиенте: Jupyter + Python;
- Поддержка и развитие базы знаний.
Мы ожидаем:
- Предыдущий опыт в роли Data Engineer / ETL Developer 1-2 года;
- Углублённые знания Python (или Scala), в т. ч. mypy, pytest (либо готовы изучить), публикация пакетов;
- Знания аналитических библиотек: pandas, numpy;
- Понимание принципов использования Git, опыт в командной разработке;
- Опыт использования Apache Airflow;
- Знания SQL: ddl, аналитические функции, понимание принципов оптимизации запросов популярных РСУБД;
- Знание общих принципов data governance.
Мы предлагаем:
- Динамичный и быстроразвивающийся бизнес, ресурсы, возможность сделать вместе лучший продукт на рынке e-commerce;
- Свободу действий в принятии решений;
- Достойный уровень заработной платы;
- Профессиональную команду, которой мы гордимся;
- Возможность развиваться вместе с нашим бизнесом.
Бонусы
- Здоровье: объёмный пакет ДМС со стоматологией; страхование от несчастных случаев; полис выезжающих за рубеж; подарочный сертификат при рождении ребенка; консультации психолога, врач в офисе.
- Развитие: наши сотрудники участвуют в конференциях, мы оплачиваем обучение. У нас есть корпоративная офлайн-библиотека, доступ к онлайн-библиотеке MyBook и к образовательным онлайн-платформам Coursera и Eduson.
- Корпоративные программы: скидки на английский язык от SkyEng и Флоу, дисконтная карта Москва Сити CityPass, помощь в ипотеке и рефинансировании от Refin Online и Ипотека.Центр, покупки в SimpleWine, акции от Эталон и Донстрой, платформа скидок SpotyGo и многое другое; зарплатные проекты Райффайзенбанк и Сбербанк (мобильные банкиры в офисе), АльфаБанк, ГазпромБанк, Тинькофф, ВТБ банк, МТС банк; Программа «Приведи друга» и «Откликнись сам».
- Социальная ответственность: материальная помощь, подарочные сертификаты при рождении ребенка.