Data Engineer

Местоположение и тип занятости

МоскваПолный рабочий деньМожно удаленно

Компания

Эксперты в сфере мониторинга и анализа деструктивной информации в сети Интернет

Описание вакансии

О компании и команде

В команду управления потоками данных ищем Инженера данных.

Задачи
  • Разработка batch и streaming потоков данных, используя Apache Kafka, Airflow, а также используя собственное решение для streaming обработки данных (selfservice etl)
  • Проработка требований и согласование способов интеграции внешних источников совместно с системным аналитиком, data архитектором
  • Предоставление поддержки data-потребителям по вопросам, связанным с использованием данных

Ожидания от кандидата

  • Аналогичный опыт работы не менее 1 года
  • Опыт разработки ETL процессов и работы с оркестраторами (Airflow / Dagster)
  • Отличное знание SQL и опыт работы с реляционными базами данных
  • Опыт работы с ClickHouse

Будет плюсом

  • Понимание концепций построения хранилищ данных
  • Опыт работы с Apache Kafka для интеграции и передачи данных
  • Опыт работы с MPP СУБД и понимание их архитектуры

Условия работы

  • Конкурентный уровень з/п, размер обсуждается по итогам собеседования и зависит от квалификации
  • Официальное оформление по ТК РФ
  • Формат работы - офис/гибрид/удаленка
  • Гибкое начало рабочего дня, график 5/2, выходные: суббота, воскресенье

Бонусы

  • Обучение и повышение квалификации за счет организации
  • Развитая система корпоративной культуры и нематериальной мотивации команды