Тестировщики! Выберите себе работодателя по вайбам→ vibe.habr.com

Data Engineer (Middle/Senior/Lead)

Местоположение и тип занятости

Москва, Санкт-ПетербургПолный рабочий день

Компания

Разработка, внедрение и обслуживание сложных программных решений мирового уровня

Описание вакансии

Условия работы

  • Разработка End2End процессов формирования витрин данных в Hadoop на фреймворке Spark;
  • Разработка ETL-алгоритмов и витрин данных (Apache Spark, Hadoop);
  • Проведение системного, функционального и интеграционного тестирования;
  • Разработка и внедрение эффективных методик контроля качества данных;
  • Оптимизация загрузок;
  • Проектирование логической модели и логики преобразования данных;
  • Анализ требований бизнеса по получению новых данных, оценка наличия и качества данных.

Бонусы

  • Гибкое начало рабочего дня: с 08:00 до 11:00;
  • Возможность взять больничный без больничного: 7 дней в году;
  • ДМС, включая стоматологию и горячую линию психологической поддержки;
  • Внешнее обучение: посещение IT-конференций, сертификация, тренинги и курсы за счет компании;
  • Английский язык: оплачиваемое обучение в школе Cinimex и скидки на Skyeng;
  • Внутренний сервис бенефитов: скидки на кафе и рестораны, загородные клубы, SPA, фитнес, электронные библиотеки, бытовую технику;
  • Корпоративные цены на фитнес в X-fit для сотрудников и их родственников.

Дополнительные инструкции

  • Опыт разработки на Spark / PySpark;
  • Опыт проектирования и разработки потоков данных, алгоритмов загрузки и обработки данных в Hadoop / Greenplum / ClickHouse;
  • Опыт выстраивания и оптимизации производительности ETL-потоков;
  • Опыт работы с Hive;
  • Продвинутые знания SQL.