dtpolovinkindtpolovinkin

Дмитрий Половинкин

Data Engineer (ETL, DWH Developer)Инженер по даннымИнженер по даннымСредний (Middle)
Не ищу работу
Возраст: 27 лет
Опыт работы: 3 года и 5 месяцев
Регистрация: 24.11.2018
Последний визит: 2 недели назад
Местоположение: Россия, Санкт-Петербург
Дополнительно: готов к переезду и к удаленной работе
Профессиональные навыки: SQLPythonETLGoogle BigQueryApache AirflowApache SparkDWHGoogle Cloud PlatformBusiness intelligenceБольшие данные
Войдите, чтобы посмотреть контакты пользователя

Обо мне

Data Engineer с опытом в разработке и построении ETL пайплайнов, хорошо знаю и использую SQL и Python, так же разрабатывал DWH, работал с облаками (GCP), использовал C# и LINQ. 
Работал с различными базами данных (BigQuery, Snowflake, Cassandra, Oracle, проприетарные).

Владение английским - C1 / Advanced

Life-long learner, стараюсь узнавать что-то новое почти каждый день, несложно даются почти любые новые технологии. Интересна область работы с распределенными системами и технологии как Spark, Kafka.

Участие в профсообществах

Опыт работы

  • IT-компания
    Санкт-ПетербургОт 1000 до 5000 сотрудников
    Data Engineer
    Февраль 2022 — По настоящее время (7 месяцев)
  • Разработка ПО, анализ данных и машинное обучение
    МоскваОт 100 до 1000 сотрудников
    Data Engineer
    Апрель 2021 — Ноябрь 2021 (8 месяцев)

    Основной дата инженер на проекте для большой международной фармацевтической компании + DE на AI проекте для крупного ретейла

    • Разработка ETL пайплайнов для обработки данных на Python (pandas, requests, json), Prefect (аналог Airflow) и Talend
    • Написание продвинутых SQL запросов и разработка хранилища данных (DWH) в Google BigQuery, работа с Google Cloud Platform (GCP), Docker, Gitlab CI/CD, удаленные Linux сервера
    • Интеграция различных API и работа с REST сервисами
  • A global fintech leader with $4 billion in revenue
    Санкт-ПетербургОт 100 до 1000 сотрудников
    Data Engineer
    Апрель 2020 — Март 2021 (1 год)

    Data engineering во время интеграции инструментов компании для клиента - самого большого швейцарского банка (UBS), в мои обязанности входили:

    • Разрабатывал, настраивал и поддерживал трансформации данных на основе внутреннего ETL инструмента с back-end на C # и своей NoSQL базой данных
    • Регулярно использовал C # / LINQ для более сложных процессов, Python для прикладных задач по данным
    • Приводил в порядок и постоянное улучшал документацию по проекту и ETL инструменту
    • Ежедневная коммуникация с международной командой на английском устно и письменно
    • Иногда работал с S3, AWS и скриптами PowerShell
  • Крупнейшая цифровая платформа. Технобренд, объединяющий лучшие мировые практики и самый современный стек
    Санкт-ПетербургБолее 5000 сотрудников
    Data Engineer
    Ноябрь 2019 — Февраль 2020 (4 месяца)

    Разработка хранилищ данных и построение витрин

  • Ведущий мировой поставщик услуг по разработке программного обеспечения и цифровых платформ
    Санкт-ПетербургБолее 5000 сотрудников
    ETL Software Engineer
    Апрель 2019 — Ноябрь 2019 (8 месяцев)

    Разработка ETL в области Business Intelligence

    • Завершили большой проект от начала до конца вместе с командой для крупного канадского заказчика
    • Разрабатывал и мигрировал многочисленные ETL-пайплайны в Talend Open Studio
    • Использовал такие БД как Snowflake, Cassandra, также MSSQL, PostgreSQL
    • Работал в Scrum команде, распределенной по миру
  • Международная IT-компания, занимающая разработкой ПО на заказ, а также разработкой собственного продукта
    Санкт-ПетербургОт 100 до 1000 сотрудников
    Business Analyst Intern
    Декабрь 2018 — Февраль 2019 (3 месяца)
    • Писал требования для крупного веб-приложения для страховой отрасли США (appulate.com), работал над новой функциональностью и улучшением существующей.
    • Заполнял Confluence документацией, работал с разработчиками, аналитиками данных и менеджерами.
    • Получил опыт работы в IT в хорошо организованной команде.

Высшее образование

  • СПбГУ

    Санкт-Петербургский горный университет
    Санкт-Петербург549 выпускников
    Освоения подземного пространства
    Сентябрь 2012 — Сентябрь 2018 (6 лет)

    Специалист (учебная степень).

    Специальность - строительство подземных сооружений

    Был старостой группы

Дополнительное образование

  • EPAM University Program

    Тренинги для начинающих специалистов
    Москва201 выпускник
    Лаборатория по Business Intelligence
    Апрель 2019 — Октябрь 2019 (6 месяцев)

    Полностью прошел курс в EPAM Systems по Business Intelligence длительностью примерно 6 месяцев (Апрель - октябрь 2019 года, 3 раза в неделю), курс состоял из интенсивной теоретического и практического обучения. Вместе с группой обучился различным инструментам для работы с данными и методов BI, как их использовать и сопутствующие навыки.

    Изучил аналитический SQL, Power BI, Oracle DWH, Talend, Tableau, CI/CD, Git.