Дарья Щербакова

В нашей компании открыта позиция: Big Data Engineer

Формат работы: удаленно/ home office
Занятость: Full-time 9.00-18.00
Название компании: Андата /andata.ru

Более подробная информация о компании https://www.youtube.com/channel/UCwQVupjziD6iSnwZO1ITN5g

Обязанности:

∙ Разработка методологии построения физической модели данных всей компании;

∙ Осуществлять контроль за состоянием данных;

∙ Развитие собственного инструментария описания метаданных;

∙ Разработка логической и физической модели хранилища данных;

∙ Участвовать в разработке целостной корпоративной информационной архитектуры (хранилища данных, аналитические системы, BI, BigData);

∙ Анализировать все возможности по получению дополнительных преимуществ для бизнеса за счет использования данных и использования новых аналитических инструментов и кейсов;

∙ Взаимодействовать и консультировать техническую команду по вопросам архитектуры данных;

∙ Разрабатывать архитектурные принципы по интеграции, хранению и визуализации данных;

∙ Создавать и организовывать процессы управления данными, совершенствовать и обеспечивать корпоративную политику, связанную со стандартами продуктов данных, качеством и информационной безопасностью;

∙ Устанавливать процедуры контроля данных, пересматривать и улучшать бизнес-процесс для поддержания и улучшения качества данных;

∙ Разрабатывать решения для данных, проведение обзора / аудита архитектуры решений для улучшения обработки данных.

Требования:

∙ Высшее техническое или математическое образование;

∙ Опыт не менее 2 лет в проектировании сложных систем хранения данных;

∙ Знание принципов и подходов к построению архитектуры хранилищ данных;

∙ Знание основных подходов к проектированию БД;

∙ Текущий stack: MSSQL, Clickhouse, ElasticSearch, Kafka, NiFi, Airflow;

∙ Проектирумый stack: Spark, Flink, ElasticSearch, Pinot, Presto, Airflow, Neo4j, Yugabyte;

∙ Продвинутые знания Python, желательно Scala;

∙ Умеете писать сложные запросы как SQL, так и NOSQL;

∙ Обязателен практический опыт работы с ElasticSearch;

∙ Умеете структурировать информацию и грамотно излагать свои мысли;

∙ Способность обучать людей и делиться знаниями;

∙ Знание основ архитектуры колоночных БД и графовых БД;

∙ Навык написания технических заданий, руководств и обучающих, методических материалов.