Инженер данных

Требования

Инженер по данным
Middle
Git
Python
Apache Airflow
Apache Spark
PostgreSQL
Apache Hadoop
Apache Kafka

Условия

Можно удалённо
Москва
Пермь

Компания

Один из международных лидеров по производству минеральных удобрений

Описание вакансии

О компании и команде

«УРАЛХИМ» – это компания, обладающая долговременным потенциалом развития. За какой бы участок работы ни отвечали наши сотрудники, они объединены общей целью, и это понимание делает наш труд плодотворным и интересным. Наше структурное подразделение УралАйтех входит в реестр аккредитованных ИТ-компаний.

Основные обязанности:

  • Разработка, сопровождение и оптимизация ETL-процессов
  • Разработка механизмов автоматического составления датасетов под потребности пользователей
  • Разработка сложных SQL запросов и оптимизация существующих
  • Извлечение данных по REST API из внешних источников
  • Логистика данных между микросервисами трансформации данных
  • Обеспечение данными ML-моделей.

Ожидания от кандидата

Нам важно:

  • Знание SQL и опыт работы с различными СУБД, реляционными и нереляционными (MSSQL, ClickHouse, Postgres, Mongo)
  • Знание Python (pandas, requests)
  • Опыт написания процессов загрузки данных (ETL), практический опыт работы с Apache Airflow
  • Понимание основных этапов обработки и анализа данных, инструментов и методов, применяемых в этой области
  • Исследовательский склад ума, желание изучать новые технологии.

Преимуществом будет опыт работы с:

  • Apache Nifi, Loginom
  • Git
  • Minio/s3-совместимыми объектными хранилищами
  • Greenplum, Cassandra.

Условия работы

Мы предлагаем:

  • Стабильную заработную плату: оклад + годовой бонус 30%
  • Корпоративное обучение soft and hard skills
  • Возможность профессионального развития и карьерного роста
  • Расширенный ДМС
  • Современный офис в г. Пермь/ в г. Москва/ удаленный формат работы.