Специализируюсь на проектировании современных аналитических хранилищ DWH по медальонной архитектуре и построении отказоустойчивых ETL/ELT-процессов с мониторингом и алертингом сбоев. Есть опыт администрирования баз данных и настройки систем BI-отчетности с нуля.
Ключевые компетенции:
- Проектирование и построение DWH: dbt, ClickHouse, PostgreSQL, MySQL. Внедрение инкрементальных моделей — ускорение загрузки данных в 2-3 раза.
- Оркестрация и интеграция данных: Apache Airflow разработка DAG, мониторинг и алертинг в Telegram, Yandex Data Transfer, базовое знание Apache Kafka.
- Аналитика и BI: Разработка дашбордов и ключевых бизнес-метрик (AR, CR, возвратность) в Apache Superset с выстраиванием ролевых моделей RBAC.
- Программирование: Написание и оптимизация сложных SQL-запросов (включая оконные функции, PL/pgSQL, PL/SQL), Python (Pandas, интеграционные скрипты).
- Участник хакатона Finopolis 2022 от Центробанка РФ.
Имею профильное высшее техническое образование и регулярно прохожу профильные курсы по проектированию DWH / хранилищ данных и колоночных СУБД.
Ищу задачи, связанные с проектированием DWH на modern data stack и построением аналитики для бизнес-метрик.


Выберите навык, чтобы посмотреть, какие тесты специалист уже прошел.
Стэк: Apache Airflow, dbt (Data Build Tool), ClickHouse, MySQL, Apache Superset, Yandex Data Transfer, SQL, NocoDB, Gitlab, ELT, ETL
- Создавал и поддерживал витрины данных в DWH ClickHouse
- Создавал базы данных ClickHouse, расширял пользовательские роли, назначал привилегии на уровне таблиц, представлений, баз данных (RBAC)
- Разрабатывал и поддерживал ELT процессы в dbt, работал по паттерну медальонной архитектуры (Medallion architecture слои bronze, silver, gold).
- Настраивал трансфер данных из баз данных MySQL в ClickHouse через Yandex Data Transfer.
Объединил 6 источников данных в 1 при помощи dbt, Apache Airflow, ClickHouse, Yandex Data Transfer. Тем самым создал единый источник данных для всех отчетов.
- Оптимизировал dbt модели и SQL запросы для ускорения BI отчетности в Apache Superset и ускорения выполнения DAG. Перевел все витрины данных из gold-слоя на инкрементальную загрузку, что ускорило загрузку в 2-3 раза.
- Разрабатывал и поддерживал DAG в Apache Airflow для запуска по расписанию инкрементальных dbt моделей. Занимался мониторингом DAG через telegram бота.
- Создавал DAG для мониторинга основных метрик с отправкой алертов в telegram бота: Суммы оплат, Заявки, Выдачи, Некорректные операции.
- Создавал отчеты с нуля (> 10 отчетов) в Apache Superset для МКК, Коллектинга, 1С по ключевым бизнес-метрикам: Approve Rate (AR), Conversion Rate (CR), Отказы, Прогнозирование и другие.
- Вел RBAC для пользователей Apache Superset.
- Выполнял ad-hoc задачи разной сложности.
- Сопровождал мастер-системы данных для создания справочников НСИ в NocoDB.
- Вёл версионирование ELT пайпланов dbt-моделей и DAG Apache Airflow в Gitlab
- Занимался сверкой данных на всех слоях данных (сверка количества записей в источниках и в хранилище данных)
Стэк: Python (Pandas, Shapely, Turfpy, openpyxl), PostgreSQL, SQL, Apache Kafka,
PL/pgSQL, Oracle, PL/SQL, JavaScript, PostGIS, Jira, Confluence
- Выгрузка, обработка и анализ данных: PostgreSQL, Python, Pandas
- Геокодирование и работа с геоданными: PostGIS, Shapely, геосервер Martin
- Написание функций обработки данных и геометрии на PL/pgSQL, хранимых процедур на Oracle PL/SQL
- Оптимизация хранилищ: проектирование индексов, материализованных представлений
- Проектирование БД, написание и оптимизация сложных SQL-запросов
- Верстка отчётов и визуализаций на JavaScript (jExcel, Apache ECharts)
- Написание ТЗ для разработчиков, проведение код-ревью
Стэк: Fore, Форсайт Аналитическая Платформа, MySQL, PostgreSQL, TFS
- Разработка и доработка ПО на платформе Fore (Форсайт АП): исправление багов,
расширение функционала
- Написание и рефакторинг SQL-запросов, миграция запросов с MySQL на PostgreSQL
- Работа с системой контроля версий TFS, трекинг задач в Youtrack
Информационная безопасность автоматизированных систем