Дмитрий Ширшов (dimensionkernel), 22 года, Россия, МоскваДмитрий Ширшов (dimensionkernel), 22 года, Россия, Москва

Дмитрий Ширшов

Эксперт
The brighter the light, the darker the shadowБэкенд разработчикИнженер по даннымСредний (Middle)
От 450 000 ₽Не ищу работу

Контакты

Войти
Возраст: 22 года
Опыт работы: 2 года
Регистрация: 21.12.2022
Последний визит: 1 день назад
Гражданство: Россия
Местоположение: Россия, Москва
Дополнительно: готов к удаленной работе
Знание языков:

Обо мне

My full CV (updated 08.09.2024):  click
Ссылка на моё полное резюме на русском (обновлено 08.09.2024): клик
Мой Github с личными проектами: интересующийся клик

В настоящий момент работаю по специальности, смежной с такими направлениями, как DE и DS


Регулярно занимаюсь самообучением

Навыки

Python
Scala
PostgreSQL
SQL
Linux
Docker
Git
Apache Kafka
Apache Spark
Apache Hadoop

Эксперт

8консультаций
5
6 оценок

Работаю с квалификациями

СтажёрМладший

Помогаю развивать навыки

ООПScalaSQLPythonPostgreSQLGitApache SparkApache HadoopApache KafkaApache Airflow

Экспертность

В настоящий момент работаю в группе компаний Лиги цифровой экономики на должности разработчика. Основной заказчик - Альфа банк 

Менторство: https://teacher.army/

Основная специализация - автоматизация бизнес-процессов, прототипирование логики, разработка пайплайнов обработки потоковых/батчевых данных, проектирование DWH.

Стоимость
1000 ₽/ час
Первая встреча бесплатно

Опыт работы

  • Группа компаний, которые оказывают профессиональные услуги в области информационных и цифровых технологий
    МоскваБолее 5000 сотрудников
    Разработчик баз данных (Средний)Middle ETL Разработчик
    Март 2024 — По настоящее время (1 год)

    Деятельность на проекте: 

    • Разработка nrt-потоков (Flink, Spark, Kafka, Kubernetes, Python, Groovy, Swagger)
    • Участие в процессах цифровизации и автоматизации в качестве back-end специалиста (основной упор на Python с соответствующими библиотеками)
    • SQL-разработка на новом стеке  (Greenplum, Airflow,  SQL), в том числе участие в миграции со старых решений
    • Участие разработке потоков на старом стеке (Oracle)
    • SSAS разработка (в основном мелкие доработки и сопровождение существующих проектов, в т.ч. табулярных кубов)
    • Реализация прочих проектов по запросам заказчика

    Деятельность вне основного проекта: 

    • Техническое собеседование кандидатов в качестве эксперта 
    • Наставничество в рамках программ внутреннего центра компетенций
  • Крупнейшая цифровая платформа. Технобренд, объединяющий лучшие мировые практики и самый современный стек
    МоскваБолее 5000 сотрудников
    Бэкенд разработчик (Средний)Иженер по разработке (Middle ETL разработчик)
    Октябрь 2023 — Март 2024 (6 месяцев)

    Участие в CI/CD процессах проекта. Участие в доработке основного фреймворка для распределительных вычислений. Участие в формировании функциональных требований к имплементациям логики формирования витрин с данными
    Достижения:

    •  Внедрена логика расчетов транзитивных цепочек с адаптивной глубиной связи
    • Переработана и улучшена логика логирования процессов вставки и обновления технических записей с данными в таблицах.
    • Самостоятельная сборка релизов
    ScalaPythonApache KafkaApache SparkSQLBashGitLinuxRESTApache Flink
    Ученый по данным (Младший)Эксперт по цифровым технологиям аудита (DE/DS)
    Август 2023 — Сентябрь 2023 (2 месяца)
    Ученый по данным (Младший)Специалист по цифровым технологиям аудита (DE/DS)
    Март 2023 — Июль 2023 (5 месяцев)

Высшее образование

  • РАНХиГС

    Российская академия народного хозяйства и государственной службы при Президенте Российской Федерации
    Москва2122 выпускника
    Институт экономики, математики и информационных технологий
    Сентябрь 2021 — По настоящее время (3 года и 5 месяцев)

    Направление "Цифровая экономика".

    Программа охватывает как специальные математические дисциплины, так и предметную область, связанную с машинным обучением, нейронными сетями и базами данных 

Дополнительное образование

  • Корпоративный университет Сбербанка

    Более 50 обучающих программ, направленных на развитие общебанковских профессиональных навыков
    Apache Spark для задач дата инжиниринга
    Январь 2024 — Март 2024 (2 месяца)
    Apache Spark для задач Data Science
    Июнь 2023 — Июль 2023 (1 месяц)

    Итоговой работой в рамках курса была реализация полного ELT-пайплайна загрузки из kafka в PG.  Для одного из промежуточных слоев трансформаций была написана несложная рекомендательная модель. 

    Результат итоговой работы - таблицы в PG из стороннего источника (в моем случае БС был Kafka). Среди таблиц - сущность с эмбеддингами, сущность с рекомендациями для пользователя  

    Рекомендательные системы
    Июнь 2023 — Июль 2023 (1 месяц)