Хорошо владею SQL, Python, Hadoop, ETL, Airflow, Spark.
Получаю драйв от освоения новых методов и технологий BigData.
MS SQL Server Management Studio и MS Visual Studio (SSIS, SSAS, SSRS). Импорт данных, построение ETL, хранилища DWH, Tabular models, servis Report
Обучение Data Engineer проекты по курсам:
1) Основы реляционных баз данных. MySQL
- База данных для платформы образовательного учреждения.
2) Основы языка Python
- Игра "Лото" между пользователем и компьютером.
3) Методы сбора и обработки данных из сети Интернет.
- Парсинг Инстаграмм
4) Построение хранилища данных и основы ETL
- Создание DAG-ов
5) BigData. Введение в экосистему Hadoop
- Написал финальное задание
6) BigData. Фреймворк Apache Spark
- Написал модель PipelineSparkML
7) Настройка потоков данных. Apache Airflow
- Переписал pipeline используя синтаксис TaskFlow API из Airflow 2.0
8) Потоковая обработка данных
- Определение типа покупателя
9) Микросервисная архитектура и контейнеризация
- Переделал шаг деплоя в CI/CD
10) Linux. Рабочая станция
- Переустановил Docker собрал связку nginx + PHP-FPM
11) JVM в экосистеме Hadoop
- Сделал анализ данных в Apache Zeppelin
12) Введение в noSQL баз данных. Redis, MongoDB, Tarantool
- Сделал бальную оценку, фильтрацию
13) Многомерный анализ данных: OLAP и BI
За хорошую успеваемость получил право быть наставником по курсам:
- Основы реляционных баз данных. MySQL.
- Методы сбора и обработки данных из сети Интернет.
- BigData. Введение в экосистему Hadoop.
- Настройка потоков данных. Apache Airflow.
- Потоковая обработка данных.
Проведение работ по ремонту и эксплуатации систем: отопления, вентиляции, канализации, электроснабжения.
Разработка и наполнение баз данных MS Access, Excel.
Разработка и наполнение сайтов WordPress, Ucoz.
Устройство корпоративных сетей и точек доступа.
Установка и настройка операционных систем Windows 7/10, Ubuntu, Debian, CentOS, Hortonworks, VBox, VMWare, Server.
Построение алгоритмов отчётной документации, описание работ, материальный отчёт, форма М29, сметы, акты, процентовки и т. п.
Тестировщик информационных систем и программного обеспечения
инженер-механик
Результат финального теста 39 из 40