Data engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Кто мы?
Мы — команда увлеченных людей и делаем сервис, который позволяет превратить обычный, даже самый рутинный, момент жизни в яркий и насыщенный.
Очень может быть, что скоро ты будешь менять мир аудио вместе с нами.
Наша цель — стать аудиопривычкой современного человека.
Как мы живем:
Мы ценим свободу. Ты всегда можешь свободно выражать свои мысли и идеи, а выбор пути решения задач всегда за тобой.
Мы — творцы. Знай, что тут ты можешь смело создавать новое, экспериментировать и творить, развивая себя.
Мы все на одной волне. Каким бы сложным не был проект, какие бы сроки не стояли, ты точно знаешь, что найдешь помощь и поддержку среди коллег.
Все, что тебе нужно для комфортной работы — всегда под рукой, а если чего-то не хватает, то всегда можно об этом сказать.
Чем нужно будет заниматься?
- Участвовать в построении платформы для создания пайплайнов обработки петабайт данных аудиоконтента для рекомендаций и аналитики;
- Трансформировать ETL из родного overnight batching в модный молодёжный realtime streaming;
- Совместно с командой DataScience реализовывать сервисы рекомендаций, учитывающие фидбек, контекст и внешние триггеры в NRT режиме;
- Мигрировать DataLake в cloud и внедрять self-service инструменты для реализации DataMesh архитектуры;
- Создавать data-products и обучать обучать этому разработку и аналитиков;
- Внедрять Data Quality Gates и лучшие практики работы с данными;
- Интегрировать платформу данных Звука в большую экосистему Сбера.
А вот это нужно уметь:
- Релевантный опыт работы от 2-х лет;
- Опыт создания ETL-процедур;
- Опыт работы с batch и stream обработкой данных;
- Знание Python, SQL, Sсala;
- Практический опыт работы с Hadoop, Spark, Kafka, Flink, AirFlow;
- Знакомство с kubernetes и опыт его использования в работе;
- Будет плюсом:
- опыт внедрения каталога данных;
- опыт разработки инструментов контроля качества данных;
- Cassandra, Scilla, GreenPlum, Presto, ClickHouse;
- опыт работы c datascience командой.
Работа должна быть в удовольствие, поэтому:
- Стильное рабочее пространство рядом м. Кутузовская (буквально 5 минут от метро / МЦК);
- Новенький Macbook прям из коробки тебе на стол;
- ДМС с первого рабочего дня, включая стоматологию;
- Компенсация обучения и митапов;
- Активно развивающийся HR-бренд;
- Ламповость и крутые корпоративы, а еще у нас есть вписки на концерты и мероприятия;
- Присоединившись к нам, ты сможешь принять участие в развитии продукта, которым пользуются миллионы;
- Банально, но факт: у нас белая зарплата и оформляем по ТК РФ.