Data Engineer

В связи с активным ростом в Дирекцию по большим данным корпоративного центра X5 Retail Group открыта вакансия Data Engineer.

Big Data является одним из приоритетных направлений нашей компании. В 2017 году, в рамках компании создан новый департамент по разработке продуктов на основе Big Data. Наша основная задача сейчас - создать инструменты для более качественного изучения трендов среди наших покупателей. Присоединившись к нашей команде, вы сможете применить свои знания и опыт для решения интересных и сложных задач, которые повлияют на десятки миллионов людей, посещающих нашу сеть ежедневно.

Какая у нас сверхзадача: построение аналитической платформы, объединяющей данные из десятков источников и обеспечивающей достоверной информацией сотни потребителей.

Кто наши потребители:

• команды датасаентистов;
• бизнес-аналитики;
• системы BI-отчетности;
• системы-приемники.

Что мы делаем для решения сверхзадачи:

• разрабатываем промышленные решения по обработке и доставке данных от источника до аналитической платформы;
• проектируем модель и потоки данных в хранилище;
• разрабатываем процедуры на языке PL/pgSQL;
• ставим задачи сопряженным подразделениям.

Какие инструменты мы для этого используем:

• Hadoop - для создания Data Lake;
• Apache Hive - для работы c данными hadoop;
• Greenplum + sas dis - для создания Enterprise Data Warehouse;
• Data Vault 2.0 - для проектирования модели и потоков данных;
• Git - система контроля версий кода;
• Kanban - для управления задачам.

Какому опыту рады, но при необходимости научим:

• Apache Kafka;
• Apache Spark;
• Apache NiFi;
• Apache Airflow.

Что мы ждем от кандидата:

• Высокий уровень владения SQL (join, группировки, фильтрация по агрегатам, аналитические функции, работа с планами запросов);
• Опыт работы с одним, или несколькими из перечисленных инструментов: GreenPlum, PostgeSQL, Hive, Oracle DB, Spark, MS SQL, SAS DI, Python, Vertica;
• Опыт в создании или развитии хранилищ данных;
• Опыт в разработке витрин данных хранилища по требованиям заказчика;
• Опыт в роли системного аналитика по направлению хранилищ данных приветствуется;
• Опыт в разработке ETL\ELT-решений приветствуется;
• Знание модели Data Vault, как преимущество.

• Гибкий график работы (с 8/9/10/11 утра);
• Возможность работать удаленно;
• Возможность обучаться и сертифицироваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, отраслевые конференции, программа развития управленческих навыков, очные мастер-классы, платформы онлайн-образования и многое другое;
• Яркую корпоративную жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации;
• Развитую систему компенсаций и льгот;
• Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья;
• Скидки в магазинах сети Х5 («Пятёрочка», «Перекрёсток», «Карусель»);
• Программу привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров);
• Материальную помощь сотрудникам, попавшим в сложную жизненную ситуацию;
• Оформление по ТК РФ с официальной заработной платой.