Teamlead (команда Data Engineering - Platform)

24 апреля

Требования

Инженер по данным, Старший (Senior) • Greenplum • Apache Airflow • DWH • PostgreSQL • Apache Spark • Python • Java • CI/CD

Местоположение и тип занятости

Москва, Санкт-Петербург • Полный рабочий день • Можно удаленно

Компания

СберМаркет Tech

Мы Tech-команда, которая создает лидирующий сервис на рынке e-grocery в России и делает это с любовью.

Описание вакансии

О компании и команде

🚀 Отдел Data Engineering

Мы создаем хранилище данных и инструменты для их анализа. Наш отдел развивается вместе с бизнесом, этот юнит формируется с нуля, а значит, что у тебя будут все возможности проявить себя и на 100% участвовать в построении процессов по направлению данных.

👩‍💻Чем предстоит делать:

Заниматься разработкой, оптимизацией и мониторингом ETL-процессов на основе технологий GreenPlum, Airflow, ClickHouse, Spark и Python.
Поддерживать CDC-решение и улучшать его
Внедрять и поддерживать аналитиков в работе с NRT-решениями (RisingWave, kSQLdb, Flink)
Участвовать в тестировании и принятии новых решений для обработки данных в компании.
Помогать разработчикам в освоении новых технологий
Участвовать во внутренних и внешних мит-апах и рассказывать нашим клиентам и партнером о том, чем живет и дышит Sbermarket DWH

Ожидания от кандидата

⭐️Мы ожидаем от кандидата:

Опыт управления командой дата инженеров от 6 месяцев;
Понимание и умение работать с Iceberg, S3;
Понимание принципов организации хранилищ данных, принципов работы колоночных БД;
Уверенное знание SQL, умение строить сложные запросы и оптимизировать производительность;
Уверенное знание Python;
Опыт разработки Scala / Java;
Опыт работы с Apache Airflow;
Опыт работы со Spark.

Условия работы

🤗Что интересного есть у нас?

ДМС с первого месяца работы в компании;
дополнительные опции на выбор — спорт, английский, промокоды на заказ продуктов или билеты в отпуск;
удаленная работа. В Москве есть большой и красивый офис, поэтому если ты из этого города или будешь проездом — welcome;
техника для работы;
интеллектуальное и физическое развитие (электронная библиотека, книжный клуб, футбол, мастер-классы в офисе);
knowledge base с курсами, книгами и записями конференций + выделенный бюджет на внешнее индивидуальное обучение.