Data Engineer

Местоположение и тип занятости

Полный рабочий деньМожно удаленно

Компания

Российский поставщик и разработчик программных решений для финтех-компаний и банков.

Описание вакансии

О компании и команде

На проект Сбера требуется Дата инженер. О проекте: Мы занимаемся созданием АС (автоматизированной системы) по анализу и мониторингу контрактов юридических лиц с микросервисной архитектурой.

Наша задача - создание рабочего места для автоматизации работы сотрудников кредитного анализа и мониторинга сотрудников мониторинга и поставка алгоритмов на больших данных, интегрируясь с множеством внутренних и внешних источников и автоматизированными системами корпоративных клиентов.

Мы работаем по Scrum с активным привлечением бизнес-аналитиков (Customer Journey Expert) и пользователей из бизнес подразделений.

В команде представлены компетенции: разработчики backend и frontend, системные аналитики, QA инженеры.

Ищем:

Data Engineer, уровень Middle и выше, в команду разработчиков для нового проекта. Основная задача – работа по расширению имеющейся витрины данных (ВД) в рамках текущей ИТ-архитектуры, создание новой ВД. Многозадачность, работа в команде – основные черты, которыми должен обладать кандидат помимо профессиональных знаний и опыта.

Ожидания от кандидата

  • Опыт работы в качестве Data Engineer / Data Analyst / ETL Developer от 2 лет;
  • Опыт работы с одной из реляционных СУБД - PostgreSQL (текущий техстек)/Oracle/mySQL/MS SQL Server;
  • Знание SQL на продвинутом уровне (аналитические функции, подзапросы, хранимые процедуры, оптимизация производительности);
  • Знание архитектуры МРР СУБД (Hadoop, Greenplum), опыт практической работы c MPP СУБД;
  • Опыт промышленной разработки на стеке Scala/Python;
  • Опыт работы с большими объемами данных с использованием стека технологий Big Data (Hadoop, Spark, GreenPlum);
  • Знание основных понятий и концепций из области Data Warehouse;
  • Практический опыт разработки витрин данных с использованием инструментов Apache Spark,  Kafka, Hadoop (Hive / Oozie).

Будет плюсом:

  • Знание методологии Agile и опыт работы в Scrum-команде будет плюсом;
  • Опыт работы с чужим кодом;
  • Знание корпоративного банковского бизнеса является преимуществом.

Обязанности:

  • Проектирование и разработка аналитических витрин данных для целей отчетности и исследований на стеке Hadoop + Spark + Scala;
  • Мониторинг и оптимизация процессов сборки витрин;
  • Разработка и поддержка сопроводительной документации и спецификаций данных, развитие и поддержка базы знаний по вопросам работы с данными;
  • Предоставление экспертной поддержки внутренним потребителям (data analysts, data scientists) по вопросам, связанным с использованием данных;
  • Анализ исходных данных в различных системах и форматах для решения бизнес-задач (оценка структуры, качества, полноты и применимости данных);
  • Контроль качества загружаемых данных.

Условия работы

  • Достойная заработнпя плата.
  • Трудоустройство по ТК, ИП, ГПХ, СЗ.
  • Удаленный формат работы.
  • Реальный рост внутри компании, регулярный пересмотр зарплаты по результатам работы.
  • Обучение в образовательном центре HeadBridge на базе компании.
  • Возможность изучения английского языка.
  • Доход обсуждаем с каждым кандидатом индивидуально (все зависит от вашего уровня знаний)
  • ДМС через 6 месяцев работы.