Верю в то, что для любой бизнес задачи можно найти техническое решение.
Вижу данные как единый поток — от источников до дашбордов.
Стараюсь ориентироваться на результат - внедряю только то, что дает измеримый эффект.
Ценю в работе сложные проекты, где можно применить опыт на стыке данных и разработки.
ETL и автоматизация
Организация ETL-пайплайнов (Airflow), интеграция с API маркетплейсов, Kafka, автоматизация процессов:
Переход на Kafka для отправки цен → повышение надежности передачи данных, возможность горизонтальной масштабируемости.
Автоматизация отправки данных на маркетплейс → достижение постоянной актуальности данных, снижение логистических расходов компании, минимизация человеческих ошибок, возможность горизонтальной масштабируемости, повышение управляемости бизнес-процесса
2. СУБД и оптимизация
Проектирование логической структуры БД (PostgreSQL, ClickHouse), миграция, оптимизация запросов.
Полная миграция СУБД PostgreSQL с реструктуризацией и оптимизацией → ускорение работы ETL пайплайнов в среднем на 20%, повышение целостности, надежности и доступности данных для аналитиков.
3. Контейнеризация и инфраструктура
Docker, Airflow, GitLab CI/CD, DevOps-подход.
Создание DEV-контура с GitLab CI/CD → единый Docker-образ для dev/main веток, ускорение тестирования/отладки на 20%, стандартизация командной работы с заданиями AirFlow.
Настройка кастомной системы уведомлений → своевременная реакция на ошибки и падения заданий.
4. Аналитика и Power BI
Разработка дашбордов, поддержка шлюза, визуализация данных.
Настройка Power BI шлюза → ежедневное автообновление отчетов для коммерции.
5. Разработка API и сервисов
FastAPI, создание инструментов для аналитиков.
Реализация API для классификации отзывов с интеграцией ChatGPT → сокращение времени ручного анализа.
Специальность - автоматизация технологических процессов и производств.
Научился: