Data Engineer (Облако данных)

ИТ-Холдинг Т1 — один из лидеров российского ИТ-рынка, партнёр ключевых производителей и разработчиков в сфере ИТ. По версии аналитических агентств CNews Analytics, TAdviser и RAEX, мы входим в топ-3 крупнейших российских ИТ-компаний. В нашем портфеле уже 70+ востребованных на рынке ИТ‑продуктов и услуг, ключевые – внесены в ЕРРП (реестр российского ПО).

В Т1 стабильность и финансовая надежность, а также социальные гарантии гармонично сочетаются с преимуществами ИТ‑компании — открытостью, инновациями и гибридным форматом работы.
Мы стремительно растём, масштабируемся и ищем новых специалистов в команду!

• Финтех-разработка — инновационные решения для цифровизации бизнеса: комплексные решения для фронт- и бэк-офисов, современные финтех-продукты, системы работы с большими данными, ускоряющие ИТ-трансформацию и повышающие гибкость и эффективность работы банковских команд.

Основная задача команд кластера Облако данных – реализация ETL-процессов взаимодействия Банка с внешними источниками данных (загрузка/выгрузка) с использованием инфраструктуры Банка и Облачных сервисов, а также настройка и поддержка ETL-процессов внутри Банка.

Вместе с нами ты будешь:

• Реализация ETL-процессов на Python и Spark на основании имеющейся документации;
• Проведение ревью кода других разработчиков;
• Реализация интеграции по получения данных из источников вида: REST API, SOAP, FTP, S3, парсинг сайтов, XLS, XML и прочих текстовых форматов;
• Построение витрин данных в Hadoop;
• Разработка и поддержка внутренних инструментов;
• Разработка проверок качества загружаемых данных.

Какие знания и навыки для нас важны:

• Опыт разработки на Python;
• Опыт проектирования и разработки ETL-процессов на базе Apache Airflow;
• Опыт работы с интерфейсами взаимодействия: REST API, SOAP;
• Опыт работы с брокерами сообщений: RabbitMQ, Kafka;
• Уверенные знания SQL;
• Опыт работы с каким-либо дистрибутивом Hadoop (Cloudera, Arenadata, Hortonworks, Apache и т.п.).

Будет плюсом:

• Понимание подходов к оптимизации производительности Python и Spark приложений;
• Опыт работы с Яндекс.ClickHouse;
• Опыт работы с OpenSearch, ElasticSearch;
• Опыт разработки микросервисов.

• принять участие в создании перспективных и масштабных продуктов/проектов, нацеленных на улучшение ____, использовать лучшие современные практики и технологии;
• гибкий формат работы — в офисе, удаленно или в гибридном формате;
• программа добровольного медицинского страхования;
• широкие возможности внутреннего и внешнего обучения, корпоративные онлайн библиотеки;
• Сервис привилегий от 100+ партнёров на покупку техники, занятия спортом и иностранными языками, концерты, отели, SPA и др. А также развитая программа компенсации и маркетплейс мерча с собственной корпоративной валютой.
• необходимая техника и софт для работы;
• конкурентная зарплата по итогам интервью и оформление по ТК.