Data Engineer

Горящая вакансия Senior Data Engineer для разработки ключевого продукта Сбера – платформы персонализации.

Наша задача – обеспечить данными разные элементы системы, создать единый workflow для пользователей и разработать E2E решения для процессов.

Задачи:

• Принимать участие в управлении бэклогом команды дата-инженеров;
• Проектировать логическую модель и логику преобразования данных;
• Собирать и анализировать требования бизнеса по получению новых данных, оценивать наличие и качество данных;
• Описывать фичи, готовить требования для смежных команд, разрабатывать спецификации и техническую документацию;
• Разрабатывать End2End процессы формирования витрин данных в Hadoop на фреймворке Spark;
• Проводить системное, функциональное и интеграционное тестирование;
• Разрабатывать и внедрять эффективные методики контроля качества данных.

Желаемые навыки:

• Развитые аналитические способности и системное мышление;
• Лидерские качества, проактивность, коммуникабельность;
• Знаком с инструментами экосистемы Hadoop: Hive, Spark;
• Имеешь опыт разработки на Spark (желательно Spark on Scala);
• Общий стаж работы не менее 5 лет;
• Высшее техническое образование.

Будет плюсом:

• Знание и понимание DevOps практики;
• Знание розничного банковского бизнеса.

Ты получишь знания и опыт работы со стеком BigData-разработки:

• Scala, Apache Spark;
• Apache Kafka, Apache Hadoop (HDFS, HBase, Hive), Apache Airflow, Python;
• Инструменты Devops;
• GreenPlum.

#DataAnalyst, #SQL, #BigData, #Hadoop, #DataEngineer, #Spark.

Мы предлагаем:

• Deep diving в предметную область, много разработки по задачам имеющим прямой эффект на бизнес;
• Возможность привносить новые идеи и нестандартные решения;
• Сообщество D-people – поддержка, развитие и возможность учиться у профессионалов;
• Достойную оплату труда;
• ДМС, сниженные ставки по кредитованию, программы лояльности для сотрудников;
• Современный офис рядом с метро Кутузовская, бесплатный фитнес в офисе.