Senior Big Data Engineer (BI Team)

BI Team - занимается разработкой системы статистики и аналитики данных о работе рекламной сети (big data).

Компания является техническим холдингом, набор хранилищ, работает с большими объёмами данных: в хранилище поступает 40 терабайт в день, что представляет из себя больше 20 млрд ежедневных событий.

Стек: Python, Vertica, PostgreSQL, Airflow, Kafka.

Проект: внутренняя статистика для внутренних пользователей

BI система самописная на PHP для внутренних пользователей

Задачи:

- Построение новых и оптимизация существующих витрин данных

- Написание и оптимизация сложных SQL-запросов

- Разработка ETL, ELT на Airflow (Python)

- Интеграция существующей инфраструктуры с различными сторонними сервисами через API

- Участие в процессе проектирования и разработки DWH

- Поддержка отдела Аналитики и R&D

Плюсами будут:

- Практический опыт построения DWH

- Опыт работы с Vertica, PostgreSQL, Airflow

- Знакомство с Kafka, Kafka Streams, Debezium

- Знания основ теории computer science (алгоритмы, структуры данных, конечные автоматы, и т.п.)

- Знакомство с ClickHouse, Greenplum

Обязательно:

- Готовность к релокации в Армению/Сербию, либо нахождение не на территории РФ 

- Знание теории баз данных

- Знание принципов построения DWH

- Опыт работы с большими объемами данных (десятки и сотни терабайт)

- Опыт работы с Python

- Понимание того, как оптимально хранить данные, чтобы их было удобно и быстро анализировать

- Умение писать сложные аналитические и оптимальные SQL-запросы

- Понимание архитектуры хранения данных

- Оплата билетов в одну сторону, место багажа

- Оплата 2 недели отеля, пока идет поиск основного жилья

- Оплата 1 месяца квартиры и депозит

- Помощь с оформлением ВНЖ, документов