Senior Data Engineer/Data Engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Мы разрабатываем аналитические системы на базе единой платформы, которые позволяют безопасно работать с данными независимо от их формата, метода хранения и эксплуатации. Платформа основана на концепции Infrastructure as Code (IAC) и состоит из нескольких независимых программных продуктов и сервисов на базе JVM/Scala и Kubernetes. Она обеспечивает высокий уровень потоковой обработки и хранения данных, управления доступом и метаданными, а также контролем их использования в периметре частных облачных сред.
Для участия в разработке аналитической платформы мы ищем Data Engineer.
Технологический стек:
- Языки программирования: Scala, Python.
- Обработка и хранение данных: Spark, Flink, Kafka, ClickHouse, Cassandra, ElasticSearch.
- Прочие технологии и фреймворки: Finagle, Jackson, ScalaTest, Docker.
Задачи:
- Реализация компонентов платформы, связанных с обработкой больших данных.
- Реализация распределенных алгоритмов на больших данных и внедрение моделей машинного обучения.
- Формирование и обработка больших наборов данных.
- Участие в разработке архитектуры платформы.
Наши ожидания:
- Профильное образование: информационные технологии, статистика, математика.
- Опыт работы по специальности от 3-х лет (для Senior Data Engineer от 5 лет).
- Опыт разработки на Scala или Java от 1-го года (для Senior Data Engineer от 3-х лет).
- Знание особенностей реализации различных алгоритмов и структур данных.
- Опыт работы в команде.
Будет плюсом:
- Опыт работы с Apache Spark, Flink, Kafka.
- Опыт работы с распределенными БД: Cassandra, HBase, ElasticSearch и т.д.
- Глубокое понимание особенностей архитектуры JVM.
- Интерес к технологиям Data Science, участие в конкурсах по машинному обучению.
Мы предлагаем:
- Работу в развивающейся технологической компании.
- Комфортные рабочие места в современном офисе, зона отдыха.
- Оформление в соответствии с ТК РФ.
- Заработную плату на уровне лидеров индустрии.
- Гибкий график для совмещения с научной и преподавательской деятельностью.
- ДМС + стоматология. Тестирование на COVID в медцентрах, в офисе и на дому.
- Возможность участия в профессиональных конференциях.
- Корпоративные скидки в фитнес-клуб World Class.
- Спортивные активности.
- Релокационный пакет для специалистов из других регионов.
- Работу дистанционно, в офисе или комбинированный формат.