Data Engineer/ETL developer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Проект:
Наша agile-команда создает информационную платформу в интересах Департамента Глобальных Рынков (ДГР).
ДГР – предоставляет корпоративным и розничным клиентам широкий спектр продуктов и услуг на локальных и зарубежных финансовых рынках.
Этот бизнес потребляет и порождает огромное количество данных, которые должны обрабатываться c целью:
• поддержки регулярных бизнес-операций
• проведения Ad hoc анализа
• подготовки регулярной аналитической / управленческой отчетности
• разработки моделей машинного обучения, направленных на решение широкого спектра прикладных задач прогнозирования, классификации, кластеризации, выявления поведенческих паттернов и отклонений от них, сентимент-анализ и т.д.
Разрабатываемая нами информационная платформа – высоконагруженное решение, призванное обеспечить достижение всех этих целей.
Текущий инструментальный стек платформы:
Python, Java, Informatica PowerCenter, Kafka, AirFlow, InfluxDB, kdb+, OneTick, MS SQL, PostgreSQL, MongoDB, Grafana, Qlik Sense, Kibana, ELK, OpenShift, Python ML/DL libraries, PySpark, TensorFlow;
Обязанности:
- Проектировать и разрабатывать потоки для загрузки данных в хранилище
- Проектировать и реализовывать слои детальных данных
- Проектирование и разработка корпоративной аналитической платформы (ПКАП);
- Системная разработка, поддержка и оптимизация ETL-процессов
- Поддержка промышленной эксплуатации разработанных решений
- Поддержание технической документации в актуальном состоянии
- Разворачивание ML моделей и проверка работоспособностей
Требования:
- Опыт работы с любой промышленной ETL-системой
- Знание SQL, PL/SQL или PL/pgSQL
- Опыт работы с одной из РСУБД (Greenplum, Teradata, Oracle, PostrgeSQL)
- Опыт работы с ML достаточный, чтобы вписывать созданный ML в ETL систему
- Опыт работы с Python от 1 года
Бонусы
Условия:
- Наша компания является аккредитованной в Минцифры;
- Полностью удаленный формат работы;
- Современный подход к обучению и развитию сотрудников;
- Конкурентная зп;
- Индивидуальный план развития по итогам регулярных аттестаций;
- В качестве приятных бонусов: ДМС со стоматологией для сотрудников и их родственников, обучение и сертификация, скидки на курсы и фитнес, разговорные клубы на английском языке и др. активности;
- Трудоустройство в штат на бессрочный трудовой договор