Data Engineer
Требования
Местоположение и тип занятости
Компания
Крупнейшая цифровая платформа. Технобренд, объединяющий лучшие мировые практики и самый современный стек
Описание вакансии
Условия работы
Команда SberData создает централизованное хранилище данных всего Сбера. Это более 350 источников данных и 100+ Пб информации, заказ и получение данных за 15 минут и современный технологический стек работы с данными, включая собственные сборки СУБД на базе Hadoop и Greenplum.
Наши решения отмечены международной премией Data Award в 2021г, а лидеры, обладающие уникальными знаниями в разработке кода и современном технологическом стеке С, Scala, Java, Python, Hadoop, Teradata, Oralce и др., являются участниками организации-фонда Apache Foundation. Масштаб задач, объемы данных, сложности финансовых процессов — мы все время на передовой современных технологий, а где-то и создаем их.
Обязанности:
- разработка дополнительной функциональности для компонентов продукта
- проработка решений и e2e тестирование ETL интеграций
- R&D, реализация пилотов по выбору технологий и решений
- разработка документации для SDP Hadoop
- поддержка промышленной эксплуатации разработанных решений.
Требования:
- опыт разработки на одном из языков не менее 2 лет Java, Scala, Python или Go
- опыт разработки ETL в экосистеме Hadoop
- опыт использовании инструментов Continuous Integration или Continuous Deploy или Delivery
- понимание механизмов работы систем контроля версий, механизмов работы систем управления сборкой и построения модульных тестов
- опыт и понимание механизмов работы систем функционального и автоматизированного тестирования
- опыт администрирования Linux предпочтение RHEL, CentOS
- желание развиваться в направлении Big Data.
Бонусы
- амбициозные проекты и задачи
- профессиональный рост в дружной команде
- бесплатный фитнес-зал в БЦ
- профессиональное обучение, конференции.