Контакты
Возраст: 27 лет
Опыт работы: 3 года и 5 месяцев
Регистрация: 06.12.2021
Последний визит: 2 недели назад
Гражданство: Россия
Местоположение: Россия, Санкт-Петербург
Дополнительно: готов к переезду и к удаленной работе
Знание языков: Английский В1 • Немецкий В1
Обо мне
Работаю с данными — большими и не только. Понимаю архитектуру Hadoop и принципы обработки BigData, хорошо владею SQL. Разрабатываю на связке Spark + Scala, также имею опыт разработки на Python. Решал задачи машинного обучения, дружу с математикой.
Люблю учиться, стремлюсь к глубокому пониманию используемых технологий.
В свободное время пишу стихи и прозу, веду литературный канал, играю на музыкальных инструментах.
Навыки
Apache Spark
Scala
Python
SQL
Apache Hadoop
Git
ETL
Apache Airflow
Pandas
PostgreSQL
Опыт работы
- Инженер по данным (Средний) • Data EngineerАвгуст 2022 — По настоящее время (2 года и 6 месяцев)
- Разработка витрин данных (Scala, Spark, Hadoop);
- Оркестрация и тестирование расчётов (Oozie, Yarn, Hive);
- Сборка и публикация дистрибутивов, вывод релизов (Jenkins, Nexus);
- Разработка фреймворка, расширяющего возможности Spark (Scala)
Apache Spark • Scala • Apache Hadoop • Git • Jenkins - Разработка витрин данных (Scala, Spark, Hadoop);
- Инженер по данным (Младший) • Data EngineerСентябрь 2021 — Август 2022 (1 год)
- Разработка пайплайнов обработки данных на Greenplum;
- Миграция данных между источниками: кластером HDFS, Greenplum, MS SQL;
- Разработка Spark-приложений (Scala + sbt);
- Оркестрация ETL/ELT с помощью Airflow (+ Gitlab в качестве CI/CD);
- Составление дизайна проектов, учёт бизнес-требований;
- Оптимизация логирования и проверки актуальности данных;
- Перенос скриптов с Oracle PL/SQL на PL/pgSQL
Высшее образование
МГТУ им. Н.Э. Баумана
Московский государственный технический университет имени Н.Э. БауманаМосква • 5603 выпускникаРобототехники и комплексной автоматизации; РКСентябрь 2017 — Июнь 2021 (3 года и 9 месяцев)15.03.04 Автоматизация технологических процессов и производств
Красный диплом
Дополнительное образование
- Apache Spark for Data EngineeringОктябрь 2022 — Ноябрь 2022 (1 месяц)Apache Spark • Scala • Git • Intellij IDEA
Технопарк
Совместный образовательный проект МГТУ им. Н.Э. Баумана и Mail.Ru GroupМосква • 188 выпускниковОсновы машинного обученияОктябрь 2020 — Январь 2021 (3 месяца)