Data Engineer

Задачи: 

• Разработка ETL-процессов для взаимодействия различных систем: выгрузка и загрузка информации в Хранилище данных (СУБД ORACLE, ...) средствами стека Apache;
• Миграции Платформ Данных (Informatica Power Center на стек Apache SPARK/Nifi)
• Решение задач оптимизации/рефакторинга;
• Проектирование и разработка нового функционала для дальнейшего развития проекта;
• Участие в развитии архитектуры высоконагруженных приложений.
• Развитие текущего решения, базирующегося на ETL-технологиях (формирование стратегии и архитектуры);
• Проведение code-review;

Требования:

• Опыт промышленной разработки 2-3 года
• Уверенное знание ETL-инструментов, Apache NiFi , Apache SPARK.
• Опыт разработки высоконагруженных ETL-процессов.
• Уверенные знания Hadoop, S3 и опыт в реализации хранилищ.
• Знание принципов работы реляционных БД: PostgreSQL, Greenplum.
• Опыт создания высоконагруженных сервисов трансфера данных.
• Опыт решения инцидентов на экспертном уровне в рамках 3-й линии поддержки.
• Опыт организации тестирования ETL-процессов, устранения дефектов.
  Навыки декомпозиции крупных проектных задач.
• Понимание работы Gitlab.

Будет плюсом:

• Java 11.
• Spring (Framework, Boot, Web Services, Security, Data, Kafka).
• Знание принципов и инструментов контейнеризации.

• Официальное трудоустройство в ООО ВК-ИТ, аккредитованную ИТ-компанию
• Возможность удаленной работы в РФ.
• Участие в конференциях
• Билайн университет
• Корпоративная связь
• Компенсация обучения по квалификации/смежной квалификации
• ДМС со стоматологией