Ведущий эксперт по разработке

Мы набираем IT специалистов в большую команду для работы на проектах для одного из крупнейших Банков РФ.

Наша команда строит единую платформу для обработки Big Data. Многое уже сделано, но впереди еще много интересных задач. Мы уже набрали некоторый опыт и готовы им поделиться.

Процесс не стоит на месте. Требуется участие опытного разработчика по загрузке внутренних и внешних источников, которая предполагает различные интеграционные решения, обработку разнотипных форматов данных, преобразования полученных данных и т.д.

Чем предстоит заниматься:
• Разработка на Python 3 импортов данных в среде Apache Airflow (у нас 2.3.2 и регулярно обновляем);
• Взаимодействие с командой аналитиков, эксплуатации, ИБ и немного с бизнесом;
• Разработка загрузок данных в Impala через Hadoop.

Необходимые навыки и требования:
• Опыт работы с Apache Airflow;
• Опыт работы с Hadoop(HDFS);
• Опыт работы с библиотеками Apache Arrow, Pandas, NumPy;
• Опыт анализа, систематизации, классификации;
• Опыт интеграции с REST, ftp, exchange-email, smb-папками, разными БД;
• Самостоятельность в принятии решений;
• Ожидаем базовых знаний сетевого взаимодействия.

Желательно:
• Организаторские способности и умение вести переговоры;
• Опыт проектирования API(сейчас мы таких не возводим, но всё может поменяться);
• Знание принципов DevOps и практик CI/CD.

Что мы предлагаем:

• Оформление по ТК РФ, оплачиваемые больничные листы;

• Работа в комфортных современных офисах в локациях нашего присутствия или в частично/полностью удаленном формате;

• Спортивные и корпоративные мероприятия;

• Программа обучения и сертификация, доступ к электронной библиотеке;

• Внутренние профессиональные сообщества и митапы для обмена опытом;

• Добровольное медицинское страхование (в том числе полис ВЗР, возможность страхования жизни и др.).