Data Engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Леруа Мерлен – французская компания, которая является безоговорочным лидером на рынке товаров для ремонта и обустройства дома. В настоящее время мы создаем свои продукты для клиентов, меняем ландшафт внутренних приложений для работы наших сотрудников и делаем много интересного)
Наша команда развивает Data-driven подход, собранные данные применяем для машинного обучения и аналитики. Меняем классический ритейл в digital. Мы гибкие. У нас высокая скорость принятия решений и полностью горизонтальная структура. Мы не говорим Big Data - говорим Data Value; не Batch, а Streaming. Не Legacy, а Open Source. Не OnPremise, а Cloud.
Обязанности:
- Обеспечить сбор и организовать процесс загрузки данных в аналитические системы, включая получение структурированных и неструктурированных данных из различных источников, подготовку, очистку и предобработку данных из внешних источников, построение агрегатов.
- Создавать и улучшать процессы обработки данных.
- Разрабатывать схемы подключения новых источников в DataLake.
- Принимать участие в архитектурных решениях.
- Разрабатывать процедуры формирования детального слоя данных и слоя витрин DataLake.
- Реализовывать процессы CI/CD и мониторинга разработанных процессов обработки данных (Grafana, Prometheus).
- Писать manual и automated DQ тесты.
- Документировать свою работу в Confluence.
- Работать в Jira.
- Запрашивать и делиться развивающей обратной связью с коллегами для совместного развития.
- Активно участвовать в различных коммьюнити компании.
Требования:
- Опыт работы с МРР решениями (Greenplum, Vertica, Teradata).
- Знания принципов работы БД, построения ХД.
- Опыты работы разработки ETL процессов (SSIS, NiFi, Pentaho, Informatica, Spark).
- Имеет опыт работы с системами контроля версий (Git).
- Опыт работы с высоконагруженными распределенными системами хранения и обработки данных.
- Отличное знание SQL, опыт оптимизации запросов.
- Опыт самостоятельного ведения проектов, прямого общения с бизнесом.
- Желание обучаться и развиваться.
Условия:
- Оформление по ТК РФ, оплата больничного и отпуска.
- Возможность профессионального развития и карьерного роста.
- Оплачиваемый полис добровольного медицинского страхования (включая стоматологию) после 3 месяцев работы в компании.
- Ежемесячно выплачивается дотация на питание в размере 2940 рублей (столовая и кафе).
- Офис в 5 минутах от метро Шаболовская (готовы предложить удаленную работу).
- Участие в конференциях, во внутренних, и внешних митапах.
- Компенсацию мобильной связи.
- Гибкое начало и окончание рабочего дня.