В нашей компании открыта позиция: Big Data Engineer
Формат работы: удаленно/ home office
Занятость: Full-time 9.00-18.00
Название компании: Андата /andata.ru
Более подробная информация о компании https://www.youtube.com/channel/UCwQVupjziD6iSnwZO1ITN5g
Обязанности:
∙ Разработка методологии построения физической модели данных всей компании;
∙ Осуществлять контроль за состоянием данных;
∙ Развитие собственного инструментария описания метаданных;
∙ Разработка логической и физической модели хранилища данных;
∙ Участвовать в разработке целостной корпоративной информационной архитектуры (хранилища данных, аналитические системы, BI, BigData);
∙ Анализировать все возможности по получению дополнительных преимуществ для бизнеса за счет использования данных и использования новых аналитических инструментов и кейсов;
∙ Взаимодействовать и консультировать техническую команду по вопросам архитектуры данных;
∙ Разрабатывать архитектурные принципы по интеграции, хранению и визуализации данных;
∙ Создавать и организовывать процессы управления данными, совершенствовать и обеспечивать корпоративную политику, связанную со стандартами продуктов данных, качеством и информационной безопасностью;
∙ Устанавливать процедуры контроля данных, пересматривать и улучшать бизнес-процесс для поддержания и улучшения качества данных;
∙ Разрабатывать решения для данных, проведение обзора / аудита архитектуры решений для улучшения обработки данных.
Требования:
∙ Высшее техническое или математическое образование;
∙ Опыт не менее 2 лет в проектировании сложных систем хранения данных;
∙ Знание принципов и подходов к построению архитектуры хранилищ данных;
∙ Знание основных подходов к проектированию БД;
∙ Текущий stack: MSSQL, Clickhouse, ElasticSearch, Kafka, NiFi, Airflow;
∙ Проектирумый stack: Spark, Flink, ElasticSearch, Pinot, Presto, Airflow, Neo4j, Yugabyte;
∙ Продвинутые знания Python, желательно Scala;
∙ Умеете писать сложные запросы как SQL, так и NOSQL;
∙ Обязателен практический опыт работы с ElasticSearch;
∙ Умеете структурировать информацию и грамотно излагать свои мысли;
∙ Способность обучать людей и делиться знаниями;
∙ Знание основ архитектуры колоночных БД и графовых БД;
∙ Навык написания технических заданий, руководств и обучающих, методических материалов.
Сфера деятельности компании: наша компания, специализируется на цифровой трансформации бизнеса.
Переводим все процессы предприятия в цифровые, оптимизируя и систематизируя реальные рабочие процессы с учетом самых современных подходов и мировых технологий.
Сфера деятельности компании: промышленное и пищевое производство, логистическая компания и оптовая торговля зерновых культур.
Сфера деятельности компании: ритейл реализующий услуги на рынках сотовой связи, мобильной электроники, портативной техники и аксессуаров, а также финансовых сервисов и услуг.
Менеджер организации, специалист