Data engineer
Зарплата
Требования
Местоположение и тип занятости
Компания
Описание вакансии
О компании и команде
Вторая по величине торговая сеть, которая продает материалы для строительства и ремонта, а также комплектует крупные стройки в России. Головной офис находится в Санкт-Петербурге, компания существует с 1995 года.
За последние несколько лет ИТ-инфраструктура компании сформировалась в полноценный highload-проект с распределенной вычислительной системой, очередями отложенной нагрузки и горизонтальным масштабированием.
В нашей компании больше 200 человек, и с каждым годом нас становится все больше.
Сейчас мы находимся в активном поиске Data engineer
Чем предстоит заниматься:
- разработка хранилища данных на базе ClickHouse;
- построение ETL-процессов;
- написание / оптимизация / профилирование SQL/NoSQL запросов;
- расчет сложных аналитических показателей в витринах данных;
- настройка ClickHouse (шардинг, репликация) в т.ч. взаимодействия с Kafka (попадание сырых данных, решение возможных проблем с очередностью сообщений, валидностью данных);
- участие в тестировании потоков с целью обеспечения их стабильной работы.
Наш стек:
ClickHouse, Pythоn, SQL, AirFlow, Spark, Apache Kafka, Yandex Cloud, Big Data, Kubernetes, FastAPI\Flask API.
Ожидания от кандидата
- глубокие знания SQL;
- умение работать с планами запросов;
- опыт работы с ClickHouse;
- опыт работы с брокерами сообщений (Kafka);
- опыт работы с Kubernetes проектами.
Условия работы
- официальное трудоустройство в аккредитованную ИТ компанию ООО "Петрович-Тех";
- полис ДМС через 3 месяца, ДМС+стоматология через год;
- участие в конференциях и обучение;
- йога в офисе, команды по баскетболу, волейболу, футболу;
- классные корпоративы;
- график работы: 5/2, удаленный формат работы, но можно работать в нашем уютном офисе на Парнасе, у нас есть парковка, велопарковка и корпоративный транспорт от м. Парнас, м. Просвещения, м. Гражданский проспект до офиса и обратно;
- чай, кофе, печеньки;
- врач в офисе (1 раз в неделю);
- приветственный набор.
Бонусы
- приветственный бонус (при трудоустройстве в нашей компании тебя ожидает приятный бонус - премия в размере полного оклада. 50% премии ты получишь при устройстве на работу и вторые 50% премии выплачиваются после удачного прохождения испытательного срока).