💥 Ищем дата-инженера для участия в Публичном собеседовании на Хабр Карьере. Оставить заявку можно здесь → Участвую!
Дмитрий Ширшов (dimensionkernel), 22 года, Россия, МоскваДмитрий Ширшов (dimensionkernel), 22 года, Россия, Москва
Эксперт
The brighter the light, the darker the shadowБэкенд разработчикИнженер по даннымСредний (Middle)
От 450 000 ₽Не ищу работу

Контакты

Войти
Возраст: 22 года
Опыт работы: 2 года и 2 месяца
Регистрация: 21.12.2022
Последний визит: 1 день назад
Гражданство: Россия
Местоположение: Россия, Москва
Дополнительно: готов к удаленной работе

Обо мне

My full CV (updated 08.09.2024):  click
Ссылка на моё полное резюме на русском (обновлено 08.09.2024): клик
Мой Github с личными проектами: интересующийся клик

В настоящий момент работаю по специальности, смежной с такими направлениями, как DE и DS


Регулярно занимаюсь самообучением

Навыки

Внутри навыка можно посмотреть пройденные и доступные тесты
Python
Scala
PostgreSQL
SQL
Linux
Docker
Git
Apache Kafka
Apache Spark
Apache Hadoop

Эксперт

8 консультаций
5
6 оценок

Работаю с квалификациями

СтажёрМладший

Помогаю развивать навыки

ООПScalaSQLPythonPostgreSQLGitApache SparkApache HadoopApache KafkaApache Airflow

Экспертность

В настоящий момент работаю в группе компаний Лиги цифровой экономики на должности разработчика. Основной заказчик - Альфа банк 

Менторство: https://teacher.army/

Основная специализация - автоматизация бизнес-процессов, прототипирование логики, разработка пайплайнов обработки потоковых/батчевых данных, проектирование DWH.

Стоимость
2000 ₽/ час
Первая встреча бесплатно

Опыт работы

  • Группа компаний, которые оказывают профессиональные услуги в области информационных и цифровых технологий
    Инженер по данным (Средний)Middle ETL Разработчик
    Март 2024 — По настоящее время (1 год и 2 месяца)

    Деятельность на проекте: 

    • Разработка nrt-потоков (Flink, Spark, Kafka, Kubernetes, Python, Groovy, Swagger)
    • Участие в процессах цифровизации и автоматизации в качестве back-end специалиста (основной упор на Python с соответствующими библиотеками)
    • SQL-разработка на новом стеке  (Greenplum, Airflow,  SQL), в том числе участие в миграции со старых решений
    • Участие разработке потоков на старом стеке (Oracle)
    • SSAS разработка (в основном мелкие доработки и сопровождение существующих проектов, в т.ч. табулярных кубов)
    • Реализация прочих проектов по запросам заказчика

    Деятельность вне основного проекта: 

    • Техническое собеседование кандидатов в качестве эксперта 
    • Наставничество в рамках программ внутреннего центра компетенций
  • Крупнейшая цифровая платформа. Технобренд, объединяющий лучшие мировые практики и самый современный стек
    Бэкенд разработчик (Средний)Иженер по разработке (Middle ETL разработчик)
    Октябрь 2023 — Март 2024 (6 месяцев)

    Участие в CI/CD процессах проекта. Участие в доработке основного фреймворка для распределительных вычислений. Участие в формировании функциональных требований к имплементациям логики формирования витрин с данными
    Достижения:

    •  Внедрена логика расчетов транзитивных цепочек с адаптивной глубиной связи
    • Переработана и улучшена логика логирования процессов вставки и обновления технических записей с данными в таблицах.
    • Самостоятельная сборка релизов
    ScalaPythonApache KafkaApache SparkSQLBashGitLinuxRESTApache Flink
    Ученый по данным (Младший)Эксперт по цифровым технологиям аудита (DE/DS)
    Август 2023 — Сентябрь 2023 (2 месяца)
    Ученый по данным (Младший)Специалист по цифровым технологиям аудита (DE/DS)
    Март 2023 — Июль 2023 (5 месяцев)

Высшее образование

  • РАНХиГС

    Российская академия народного хозяйства и государственной службы при Президенте Российской Федерации
    Институт экономики, математики и информационных технологий
    Сентябрь 2021 — По настоящее время (3 года и 7 месяцев)

    Направление "Цифровая экономика".

    Программа охватывает как специальные математические дисциплины, так и предметную область, связанную с машинным обучением, нейронными сетями и базами данных 

Дополнительное образование

  • Корпоративный университет Сбербанка

    Более 50 обучающих программ, направленных на развитие общебанковских профессиональных навыков
    Apache Spark для задач дата инжиниринга
    Январь 2024 — Март 2024 (2 месяца)
    Apache Spark для задач Data Science
    Июнь 2023 — Июль 2023 (1 месяц)

    Итоговой работой в рамках курса была реализация полного ELT-пайплайна загрузки из kafka в PG.  Для одного из промежуточных слоев трансформаций была написана несложная рекомендательная модель. 

    Результат итоговой работы - таблицы в PG из стороннего источника (в моем случае БС был Kafka). Среди таблиц - сущность с эмбеддингами, сущность с рекомендациями для пользователя  

    Рекомендательные системы
    Июнь 2023 — Июль 2023 (1 месяц)