👀 Дизайнеры, какая команда подходит вам по вайбам? Проверяйте на Вайб-чеке→ vibe.habr.com

Data engineer

Местоположение и тип занятости

МоскваПолный рабочий деньМожно удаленно

Компания

Аудиосервис, который сопровождает тебя в течение всего дня

Описание вакансии

Условия работы

Кто мы?

Мы — команда увлеченных людей и делаем сервис, который позволяет превратить обычный, даже самый рутинный, момент жизни в яркий и насыщенный.

Очень может быть, что скоро ты будешь менять мир аудио вместе с нами.

Наша цель — стать аудиопривычкой современного человека.

Как мы живем:

Мы ценим свободу. Ты всегда можешь свободно выражать свои мысли и идеи, а выбор пути решения задач всегда за тобой.

Мы — творцы. Знай, что тут ты можешь смело создавать новое, экспериментировать и творить, развивая себя.

Мы все на одной волне. Каким бы сложным не был проект, какие бы сроки не стояли, ты точно знаешь, что найдешь помощь и поддержку среди коллег.

Все, что тебе нужно для комфортной работы — всегда под рукой, а если чего-то не хватает, то всегда можно об этом сказать.

Чем нужно будет заниматься?

  • Участвовать в построении платформы для создания пайплайнов обработки петабайт данных аудиоконтента для рекомендаций и аналитики;
  • Трансформировать ETL из родного overnight batching в модный молодёжный realtime streaming;
  • Совместно с командой DataScience реализовывать сервисы рекомендаций, учитывающие фидбек, контекст и внешние триггеры в NRT режиме;
  • Мигрировать DataLake в cloud и внедрять self-service инструменты для реализации DataMesh архитектуры;
  • Создавать data-products и обучать обучать этому разработку и аналитиков;
  • Внедрять Data Quality Gates и лучшие практики работы с данными;
  • Интегрировать платформу данных Звука в большую экосистему Сбера.

А вот это нужно уметь:

  • Релевантный опыт работы от 2-х лет;
  • Опыт создания ETL-процедур;
  • Опыт работы с batch и stream обработкой данных;
  • Знание Python, SQL, Sсala;
  • Практический опыт работы с Hadoop, Spark, Kafka, Flink, AirFlow;
  • Знакомство с kubernetes и опыт его использования в работе;
  • Будет плюсом:
    - опыт внедрения каталога данных;
    - опыт разработки инструментов контроля качества данных;
    - Cassandra, Scilla, GreenPlum, Presto, ClickHouse;
    - опыт работы c datascience командой.

Работа должна быть в удовольствие, поэтому:

  • Стильное рабочее пространство рядом м. Кутузовская (буквально 5 минут от метро / МЦК);
  • Новенький Macbook прям из коробки тебе на стол;
  • ДМС с первого рабочего дня, включая стоматологию;
  • Компенсация обучения и митапов;
  • Активно развивающийся HR-бренд;
  • Ламповость и крутые корпоративы, а еще у нас есть вписки на концерты и мероприятия;
  • Присоединившись к нам, ты сможешь принять участие в развитии продукта, которым пользуются миллионы;
  • Банально, но факт: у нас белая зарплата и оформляем по ТК РФ.