Lead Data Engineer

Департамент BI - это центр экспертизы по работе с данными в компании.

Наши основные направления - обеспечение данными для работы отделов продуктовой и маркетинговый аналитики, а также команды монетизации.

Мы осуществляем процессинг данных и строим централизованное DWH, а также, автоматизируем рутинные процессы с помощью разработки сервисов и внедрения готовых программных продуктов.

Компания растет и в месте с ней развивается и наш отдел. Настал момент переосмысления текущих подходов и стека используемых технологий.

В связи с этим, в команду BI Tech мы ищем опытного коллегу на роль ведущего разработчика, способного помочь команде в правильной организации инфраструктуры для сбора и процессинга данных, обеспечить их грамотное хранение и удобство для доступа к ним конечных потребителей.

Чем предстоит заниматься:

• лидированием направления разработки;
• ревью кода, экспертизой и контролем технической стороны проекта;
• участием в согласовании принципов и концепций разработки;
• контролем соблюдения принятых принципов и концепций разработки;
• выстраиванием и развитием процессов сбора, обработки и хранения данных в компании;
• построением DWH отвечающего внутренним требованиям компании и современным стандартам построения хранилищ корпоративного класса;
• созданием и поддержка микросервисов, связанных с обработкой данных.

Мы ожидаем, что у тебя есть:

• опыт работы с данными от 5 лет;
• опыт разработки на Python от 3 лет;
• отличное знание SQL;
• опыт работы с аналитическими DWH на базе колоночных БД - BigQuery / Redshift / ClickHouse / Vertica и т.д.;
• практический опыт построения DWH “по слоям”;
• знания основных методологий моделирования данных для построения хранилищ данных;
• опыт разработки data пайплайнов полного цикла с применением ETL инструментов на базе Python (Airflow / Luigi) от 3 лет;
• понимание концепции микросервисной архитектуры;
• опыт в построении инфраструктуры для автоматизации отчетной документации / анализа и визуализация данных;
• опыт выстраивания процессов контроля Data Quality, мониторинга и алертинга;
• опыт коммуникации с бизнес заказчиками в части сбора требований к разрабатываемым сервисам;
• опыт работы с Cloud (Google / AWS);
• знание английского на уровне Upper-Intermediate.

Будет плюсом:

• практический опыт построения концепции и архитектуры DWH “с нуля”;
• работа в схожей позиции в качестве лидера направления от 1,5 лет;
• опыт работы с дата - стриминг платформами и шинами данных (Kafka / Pub Sub);
• опыт разработки на Java;
• опыт разработки CI / CD;
• опыт разработки API на Python.

Почему у нас круто работать:

• гибкий график, работа из любой точки мира или в нашем просторном офисе в Санкт-Петербурге;
• зарплата, привязанная к доллару и защищенная от валютных колебаний;
• оплачиваемые отпуска и больничные, а также 5 sick days в год;
• ДМС (в том числе и для родственников), оплата фитнеса, льготные условия на занятия английским языком и другие персональные подарки и бенефиты;
• корпоративная техника и необходимые для работы гаджеты;
• компенсация внешнего обучения и курсов, а также посещение профессиональных конференций;
• внутреннее обучение: круглые столы, лекции, воркшопы;
• активная корпоративная жизнь: квизы, спортивные марафоны, конкурсы, кибертурниры и многое другое;