ВакансииСпециалистыКурсы и обучениеЭкспертыКомпанииРейтингЗарплатыЖурнал
🔥 Карьерный онлайн-фест 17-23 ноября

Постройте стратегию развития своей карьеры. В этом помогут эксперты, коллеги-айтишники с разными карьерными треками, карьерные консультанты

Зарегистрироваться →

Андрей Гребенников (blackabc), 27 лет, Россия, ТюменьАндрей Гребенников (blackabc), 27 лет, Россия, Тюмень

Андрей Гребенников

Ученый по данным • Аналитик по данным • Младший (Junior)
От 170 000 ₽ • Рассмотрю предложения
Написать

Контакты

Войти
Возраст: 27 лет
Опыт работы: 5 лет и 3 месяца
Регистрация: 30.10.2024
Последний визит: 1 день назад
Гражданство: Россия
Местоположение: Россия, Тюмень
Дополнительно: готов к удаленной работе
Знание языков: Английский В1
Награды
Рекомендательные письма
0
Друзья
0

Навыки

Выберите навык, чтобы посмотреть, какие тесты специалист уже прошел.

Python
DWH
PostgreSQL
ETL
Apache Kafka
ClickHouse
Apache Airflow
GitLab
Pandas
BI

Опыт работы

  • ESOFT
    Разработка IT-проектов
    Тюмень • От 100 до 1000 сотрудников
    Data Engineer
    Май 2022 — По настоящее время (3 года и 7 месяцев)

    Работа в команде BI.

    1. Создал с нуля Data Lake архитектуру с многослойной моделью Raw → Processed → Curated на Parquet. Реализовал конвейеры потоковой и пакетной загрузки данных (CDC + batch) из PostgreSQL.

    2. Настроил Spark Structured Streaming для чтения данных из «Raw Layer», агрегации и загрузки в «Processed Layer».
    Реализовал ETL-процессы для регулярного обновления аналитических витрин каждые 10 минут.

    3. Написание SQL-запросов и оптимизация работы с данными: Разработка сложных SQL-запросов для анализа и обработки данных в ClickHouse и PostgreSQL, включая агрегацию данных, фильтрацию и обработку больших объемов данных для обеспечения точности и производительности.

    4. Создавал и поддерживал сложные ETL-процессы для обработки данных. Писал хранимые процедуры и триггеры для автоматизации бизнес-логики. Настроил репликацию и резервное копирование БД. Участвовал в нормализации и реорганизации схем БД для повышения производительности.

    5. Оптимизация процессов загрузки и обновления данных: Настройка параметров обновления данных и оптимизация ETL-процессов для регулярного и своевременного обновления данных в аналитических системах.

  • ФГБУ "Госсорткомиссия" по Тюменской области
    Аналитик данных
    Сентябрь 2020 — Апрель 2022 (1 год и 8 месяцев)

    1. Анализ данных и моделирование: Проведение анализа данных с использованием методов машинного обучения и регрессионного анализа для выявления скрытых паттернов в агрономических данных, таких как урожайность, высота растений, зимостойкость и другие характеристики, с целью оптимизации отбора и условий выращивания сортов растений.

    2. Агрегация и управление данными: Использование PostgreSQL для хранения, организации и обработки больших объемов данных с помощью запросов, группировки, вложенных операций, объединения таблиц и корректировки данных для эффективной агрегации и анализа.

    3. Визуализация данных: Применение PowerBI для создания наглядных и информативных визуализаций, представляющих ключевые выводы и инсайты, в поддержку аналитических задач.

Высшее образование

Дополнительное образование

  • Институт математики, естественных наук и информационных технологий

    Тюменский государственный университет, Тюмень
О сервисеУслуги и цены
Помощь
Для соискателяДля работодателяAPI сервисаСлужба поддержки
Другие проекты Хабра
ХабрQ&A