Разработчик инструментов потоковой обработки данных (Streaming Data Engineer)
Требования
Местоположение и тип занятости
Компания
Описание вакансии
О компании и команде
X5 Group — российская розничная торговая компания, управляющая продуктовыми торговыми сетями «Пятёрочка», «Перекрёсток» и «Чижик», а также цифровыми сервисами «Vprok.ru Перекрёсток», 5Post, «Много Лосося» и медиаплатформой Food.ru.
X5 Tech - IT-компания и основной цифровой партнер торговых сетей и бизнесов X5 Group. Команда из более 4500 специалистов разрабатывает решения, которые помогают 372 тысячам сотрудников группы работать с максимальным технологическим комфортом, а миллионам покупателей быстро и удобно покупать свежие продукты.
В дирекции по управлению данными открыта позиция разработчик инструментов потоковой обработки данных (Streaming Data Engineer).
Чем занимается наша команда?
Мы строим дата-платформу нового поколения, которая покроет потребности всех бизнес-
единиц Х5 Group. Ключевыми особенностями платформы являются:
- использование архитектуры Lakehouse.
- методологии Data Mesh.
- принципа Composable для вычислительных движков в составе платформы.
- построение CJM пользователей платформы через PaaS дата-сервисы в нашем private
cloud X5 Salt. - использование высокопроизводительной инфраструктуры в отдельном ЦОДе.
Какие задачи ждут успешного кандидата?
- Разработка модулей потоковой обработки данных из реляционных и нереляционных
источников. - Внедрение модулей в процессы разработки витрин данных.
- Развитие фреймворка управления потоками.
Ожидания от кандидата
Нам нужны визионеры в области инженерии данных - специалисты в равной степени умеющие придумывать решения и воплощать их в программный код. Для нас важен опыт построения больших (петабайты) современных дата-платформ со зрелыми фреймворками CI/CD. Мы ценим навыки software engineering, понимание архитектуры высоконагруженных приложений, опыт работы в крупных технологических компаниях.
- Стек:
Обработка данных: Flink SQL/Table API/DataStream, Kafka (Red Panda - как плюс),
CDC (Debezium)
Хранение данных: S3, Apache Iceberg
Инфраструктура: k8s - Опыт системной разработки на Java.
- Опыт работы с развитыми CI/CD фреймворками.
- Опыт разработки REST API.
Условия работы
- Официальное оформление с белой ЗП, ежеквартальные премии по результатам работы;
- Возможность работать удалённо или в гибридном формате;
- Удобный офис рядом с м. «Добрынинская» / удобный офис с бесплатной парковкой на м. «Волгоградский проспект» / МЦД «Калитники»;
- Гибкий график работы;
- Широкий пакет ДМС (включая выезд за рубеж и стоматологию), страхование жизни и здоровья;
- Возможность учиться и развиваться за счёт компании: внешние тренинги и семинары по профессиональным тематикам, участие в крупнейших конференциях страны, программы развития цифровых и управленческих навыков (Цифровая академия, Школа Тимлидов), онлайн и офлайн мастер-классы, корпоративный университет «X5 Полка», школа наставников и многое другое;
- Программы мотивации для спикеров и авторов: внутренняя школа Speak Up School, Write Up, ачивки и баллы за выступления, подготовка спикеров к крупнейшим конференциям страны, сообщество авторов на Хабре, возможность шерить опыт с комьюнити внутренних и внешних экспертов;
- Обмен опытом через cообщества: 12 технических комьюнити от java до devops;
- Яркая корпоративная жизнь с большим количеством мероприятий, конкурсов и возможностей для творческой реализации: регулярные внутренние митапы, демо-дни, открытые микрофоны, день IT-специалиста, программы волонтерства, корпоративное предпринимательство X5 Idea Challenge;
- Забота о благополучии сотрудников: 7 спортивных сообществ (бег, футбол, волейбол, баскетбол, хоккей, лыжи, триатлон), ежегодная Неделя здоровья;
- Скидки в экосистеме бизнесов Х5 («Пятёрочка», «Перекрёсток», «Много лосося», «Перекресток Впрок»);
- Программа привилегий Prime-zone (скидки на товары и услуги и специальные предложения от компаний-партнёров);
- Материальная помощь сотрудникам, попавшим в сложную жизненную ситуацию.