👀 Дизайнеры, какая команда подходит вам по вайбам? Проверяйте на Вайб-чеке→ vibe.habr.com

Data Engineer

Требования

Разработка ПОJavaScalaApache HadoopPython

Местоположение и тип занятости

Санкт-ПетербургПолный рабочий день

Компания

Крупнейшая цифровая платформа. Технобренд, объединяющий лучшие мировые практики и самый современный стек

Описание вакансии

Условия работы

Платформа Кибербезопасности ищет BigData - разработчика для создания и развития сервисов платформы по работе с данными, объем которых измеряется в петабайтах, с потоковой и пакетной обработкой.

Описание команды

На текущий момент над задачами работает 2 разработчика, 5 аналитиков, 3 тестировщика. Общая численность команд Платформы Кибербезопасности более 100 человек

Мы ожидаем, что у вас имеются:

  • ● Высшее техническое образование
  • ● Уверенные знания Java/Scala или python
  • ● Уверенные знания и опыт работы от года со стеком Hadoop: HDFS, Yarn, Hive, Spark, HBase
  • ● Опыт разработки ETL процессов с использованием стека Hadoop
  • ● Навыки работы с реляционными БД (PostgreSQL, Oracle)
  • ● Навыки и культура работы с промышленным исходным кодом
  • ● Опыт работы с git, Jenkins, Nexus, jira, confluence

Будет здорово, если вы:

  • ● Имеете опыт работы с кey-value хранилищами: Elasticsearch, ClickHouse
  • ● Участвовали в разработке и оптимизации высоконагруженных систем
  • ● Обрабатывали десятки террабайт данных в пакетном режиме и/или сотни тысяч событий в секунду на потоке, хотя почему тогда вы еще не работаете у нас
  • ● Имеете опыт работы с Kafka, Flink, Ni-Fi

Вам предстоит:

  • ● разрабатывать и запускать новые функции как для миллионов пользователей, так и для внутренних сотрудников банка
  • ● участвовать в развитии архитектуры в области BigData;
  • ● создавать новые сервисы платформы

использовать современные подходы, инструменты и технологии.

Бонусы

Работа у нас — это:

  • ● команда высокомотивированных и увлеченных профессионалов, с которой вы получите максимальное удовольствие от работы
  • ● большие объемы обрабатываемых данных. Хранилище на 6 Петабайт, потоковая обработка 400 000 событий в секунду
  • ● мощное железо, дополнительные мониторы и всё, что нужно для продуктивной работы;
  • ● возможность работы с новыми технологиями;
  • ● Динамично меняющийся техстек
  • ● обучение за счёт компании;
  • ● гибкий график;
  • ● красивый и комфортный офис;
  • ● ДМС;
  • ● прозрачная система бонусов и премий, достойная зарплата — размер обсудим на собеседовании.