Вакансия в архиве, на неё нельзя откликнуться.

Data Quality Engineer

Требуемые навыки

ТестированиеСредний (Middle) · Python · SQL · Linux · Java

Местоположение и тип занятости

Санкт-Петербург · Полный рабочий день · Можно удаленно

Компания

Ведущий мировой поставщик услуг по разработке программного обеспечения и цифровых платформ

Описание вакансии

Мы предлагаем вам присоединиться к одному из наших проектов!

В отдельное направление сейчас выделилось направление Data Quality, которое существует в практике Big Data. Есть 3 основных направления, которые входят в Data Quality: big data testing; infrastructure testing и database testing.

Мы используем Hadoop, MapReduce, Apache Hive, Apache Spark, Apache Kafka и многое другое, но знание этих инструментов не является критичным, по Big Data технологиям у нас есть обучение.

Также задачи включают в себя написание проверочных тестов на Python/Java, работу с тестовыми фреймворками, в том числе для тестирования BI и БД, непосредственную работу с базами данных.

Data quality специалисты играют ключевую роль в процессах управления данными (включая подготовку, интеграцию, контроль качества данных на всех этапах: от источников до витрин данных) при миграции и архивировании данных, ETL-процессах, создании Data Lake-хранилищ с использованием технологий Big Data, стриминге данных в реальном времени.

Они участвуют в разработке инструментов и метрик, анализируют причины и ошибки качества данных. Проверяют и верифицируют хранилища данных, участвуют во внедрении процедур, которые нацелены на обеспечение качества данных, в CI/CD-процессы.

Основная часть команды сосредоточена в Санкт-Петербурге, а проекты реализуем по всему миру!

Требования:

  • Опыт работы в Unix с хорошим пониманием основ работы с сетями и хранилищами
  • Практический опыт программирования на Java или Python
  • Хорошее знание SQL, понимание процедур и методов ETL
  • Знание концепций и методологий тестирования
  • Знание принципов CI / CD и передовых методов обработки данных
  • Мотивация к изучению технологий больших данных (экосистема Hadoop, Kafka, Elasticsearch)
  • Английский от уровня Intermediate

Мы предлагаем:

  • Большую профессиональную команду: в EPAM на сегодняшний день работает более 30 000 инженеров в 27 странах мира
  • Проекты из различных предметных областей
  • Команду увлеченных профессионалов
  • Возможность работать бок о бок с иностранными коллегами и впитывать best practices
  • Cоциальный пакет (ДМС, компенсация фитнеса, спортивные команды, курсы английского и т.д.)
  • Возможность для профессионального развития (наши образовательнные платформы включают 9000+ курсов и тренингов для развития технических и не только скилов (например, «Школа архитекторов», public speaking и другие) и для самореализации (мы поддерживаем большое количество проф.конференций и развивем свое community: open days, meetups etc.)

Ваш отклик

Вакансия в архиве
Вакансия в архиве, на неё нельзя откликнуться.