Data Engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
О компании и команде
Flocktory - аккредитованная динамично развивающаяся IT-компания, один из лидеров рынка Marketing Technologies
Год основания: 2012
Команда: 190+ человек
Продукты: SaaS-платформа для маркетинга (MarTech)
Ценность наших продуктов: помогаем E-Commerce на основе предиктивной аналитики делать коммуникацию с покупателями максимально персонализированной и благодаря этому увеличивать лояльность покупателей, конверсию и средний чек
BigData: Благодаря интеграции нашей платформы с сайтами крупнейших игроков рынка мы можем видеть больше 35% всех транзакций Рунета и данные о покупках и поведении более 100 миллионов человек
Клиенты: 300+ крупных E-Commerce/ритейлеров, банков, страховых компаний (Детский мир, М.Видео, АльфаБанк, Газпромбанк, S7, Билайн, МТС, Мегафон, L'Oreal и др.)
Оборот: 2.5 + млрд.рублей за 2023 (наша выручка стабильно растет на 40% от года к году последние 9 лет)
Мы ищем опытного инженера по работе с данными. В этой роли у тебя будет возможность принять участие в разработке и имплементации архитектуры платформы данных, организации процессов дизайн ревью. А также ты будешь оказывать большое влияние на процессы разработки в платформе. Мы предоставляем возможность работать с современным стеком технологий и опыт работы с Big Data (100+ TB).
Что нужно будет делать:
- Участвовать в разработке и поддержке архитектуры данных и пайплайнов как пакетной, так и потоковой обработки совместно с архитектором;
- разрабатывать пакетные и потоковые пайплайны по требованиям от продуктовых команд;
- мониторить пайплайны и качество данных, включая Data Lineage;
- разбирать инциденты (есть дежурства в рабочее время, дежурный следит за слак каналом с инцидентами).
Ожидания от кандидата
Ты наш человек, если у тебя есть:
- Опыт работы в роли инженера данных или инженера машинного обучения от 4 лет;
- опыт построения дата платформы, включая хранилища данных, ETL / ELT пайплайнов и мониторинга;
- опыт построения и работы с хранилищами данных;
- опыт по выгрузке данных из внешних источников;
- опыт работы с SQL и NoSQL;
- опыт построения и организации Data Quality;
- знание и ежедневное применение Scala Spark, желательно знание Python для работы с Airflow.
Наш стек:
- Spark, Airflow
- Scala, Python
- Kafka
- PostgreSQL, ClickHouse
- git, CI-CD, Docker / Kubernetes
- sbt / maven, ScalaTest / JUnit
Будет плюсом, если у тебя есть опыт с:
- DBT, Kafka Connect
- S3, Trino, Iceberg, Hudi, Hive
- Amazon EMR, Yandex Dataproc
Условия работы
И самое главное:
- Полностью “белая” заработная плата и все остальные выплаты;
- возможность работать в гибридном формате или полностью удаленно, в т.ч. из другой страны (оформляем по ТК РФ и платим зарплату на рублевые счета);
- возможность брать три дня дополнительно к отпуску каждые полгода для решения личных вопросов;
- расширенная ДМС со стоматологией, онкозащитой, восстановлением после ковида, онлайн-поддержкой психолога, страховкой для путешественников;
- скидки на обучение английскому от Skyeng;
- годовой бюджет на внешнее обучение каждого сотрудника;
- доступ к внутренней обучающей платформе с онлайн курсами по развитию hard и soft skills;
- частичная компенсация покупки бизнес-литературы;
- тренинги с внешними экспертами;
- участие в конференциях, подготовка к выступлениям;
- частичная компенсация занятий спортом;
- онбординг с ментором;
- поддержка buddy в течение первого месяца работы;
- корпоративный ноутбук;
- для тех, кто в Москве - современный комфортный офис в районе ст.м. Динамо (SOK, Рыбаков Тауэр);
- скидки от партнеров (больше 300 интернет-магазинов);
- большое количество онлайн/офлайн внерабочих активностей: корпоративы, Random coffee, FlockTalk, книжный клуб, покерный клуб, квизы.
Дополнительные инструкции
Этапы интервью
- Встреча с рекрутером (онлайн, ~40 минут)
- Техническое интервью (онлайн, ~1,5 часа)
- Командное интервью (~1 час)
- Проверка службы безопасности (3-5 рабочих дней)
- Официальный оффер