DevOps engineer (Airflow)

Компания Cinimex – разработчик ПО и системный интегратор. Мы работаем с российскими банками ТОП-20, ритейлерами, производственными и добывающими компаниями. К своему 28-летию компания имеет уникальный опыт разработки программных решений и продолжает развивать свою экспертизу: разработка на микросервисной архитектуре, машинное обучение и искусственный интеллект, IoT, продуктовое направление и автоматизация предприятий.

Приглашаем в команду DevOps engineer (Airflow) на проект по разработке отчетности для финансового департамента в крупном банке.

Задачи:

DevOps (60%):

• Развёртывание и сопровождение пайпланов Airflow и компонентов хранения данных в инфраструктуре заказчика (OpenShift, k8s, docker, podman, ZooKeeper).
• Настройка CI/CD пайплайнов в bitbucket & Jenkins для доставки DAG’ов, Python-скриптов и тд.
• Поддержка dev/test/prod окружений, управление конфигурациями и секретами.
• Настройка логирования, мониторинга и алертинга (Kibana, Grafana).
• Настройка прав доступа и интеграция с системами аутентификации заказчика.

Python/ETL (40%):

• Разработка DAG’ов для оркестрации ETL-процессов.
• Интеграция Python-скриптов для трансформации и валидации данных.
• Автоматизация загрузки данных из Greenplum в ClickHouse.
• Оптимизация ETL-процессов (батчинг, ретраи, SLA-контроль).
• Подготовка кастомных операторов Airflow для работы с СУБД.
• Взаимодействие с BI-разработчиками для своевременной доставки данных в Superset.

Требования:

• Опыт работы с Airflow от 2 лет.
• Уверенное знание Python, опыт ETL-разработки.
• Опыт администрирования и настройки CI/CD процессов.
• Опыт работы с Docker/Kubernetes/OpenShift.
• Понимание принципов работы распределенных систем.
• Опыт работы с СУБД (Greenplum, ClickHouse, PostgreSQL).
• Уверенное знание Linux.

Будет плюсом:

• Оптимизация отказоустойчивости Airflow (multi-scheduler, executors).
• Опыт участия в BI/аналитических проектах.
• Навыки DevOps-инженера (Ansible, Terraform).

Условия:

• Работу в аккредитованной IT-компании;
• Формат работы: офис/гибрид(2-3 дня в неделю работа в офисе г. Москва);
• Гибкое начало рабочего дня: с 08:00 до 11:00;
• ДМС со стоматологией, телемедициной и полисом ВЗР;
• Возможность взять больничный без больничного: 7 дней в году;
• Внутренние митапы и семинары для обмена опытом и экспертизой;
• Курсы английского онлайн, с компенсацией стоимости;
• Систему фидбеков, планов развития и роста в должности.