Data Engineer

О нас:

Мы работаем с большим набором обезличенных данных. Цель – построение бизнес отчетности, предсказаний и выявление инсайтов для развития продуктов компании. Результаты работы используются внутри компании (маркетинг, продакт-менеджмент). Мы делаем отчетность и предсказания, а они решают, как делать продукт исходя из этого.

Стек технологий - SQL, Hadoop, Spark, Cassandra

Чем предстоит заниматься:

• Обработка больших объёмов данных
• Построение бизнес-отчётов на больших данных
• Проведение исследований данных (поиск аномалий, закономерностей)
• Перепроектирование Legacy систем на современный технологический стек

Что требуется от вас:

• Работа с большими объёмами (терабайты данных)
• Оптимизация запросов и индексов
• Data Base Developer (MS SQL 2016+, Postgres или другие реляционные БД)
• Spark, либо похожие движки распределённых БД
• Понимание работы распределённых БД
• HDFS (понимание базовых концепций)
• Scala или Python

Будет плюсом:

• SSRS, SSAS, SSIS
• Проектирование структуры БД
• Написание хранимых процедур
• PowerBI
• Cassandra
• Скилы DBA приветствуются