Немного о моём опыте за последние три года:
Занимаюсь задачами по разработки новых интеграционных решений и DataOps процессов в хранилищах данных.
О чем можно со мной поговорить:
+ dbt (Greenplum, clickhouse)
+ clickhosue интеграция с Greenplum
+ Arendata (GreenPlum)
+ Реляционные СУБД (PostgresSQL; MSSQL)
+ Реляционная теория, модели данных (3НФ, DataVault 2.0, Anchor, Kimmbal, Inmon)
+ Построение хранилищ данных (Классические DWH, DalaLake, DataMesh, LakeHouse)
+ Системная архитектура, архитектура данных
+ Разработки интеграционных взаимодействий
+ Разработки Core-движков для хранилищ данных и ETL -инструментов
+ BI Buisnes Intelligence (Tableau) и всё на чем можно делать графики
+ Витрины данных и BRD
+ Аналитика данных
+ И многое другое Linux / GIT / CICD /
+ Изучение OpenSource проектов Airflow / GreenPlum и различных
библиотек Python
Из языков программирования ежедневно использую Python, SQL
Так же добавлю что ежедневно работаю с Linux (Bash, rest api)
ранее изучал строго типизированные языки c++, java, с#. Исходные коды на с++ и java читаю, иногда что то делаю на них. За последний год приходилось отлаживать java jar и дописывать обертку под них на python
В приложенной ссылке https://t.me/sqlclub_ru/108 можно открыть комментарии и там будет видео с одной из моих демонстраций по передачи опыта коллегам.
Разработка платформы данных Greenplum / Argo / dbt
Имею опыт работы со стеком технологий из "BigData"
Airflow / Python
Greenplum (MPP Arendata DB, Teradata)
NoSQL Rabbit, Redis
Kafka
CI/CD Liquibase / Gradle / Git
Docker контейнеры
Реляционные базы данных PostgreSQL, MS SQL
Airbyte
Работал со следующими реализациями хранилищам
а. Реляционная модель данных, (Кимбалла, Инмона, 3НФ что то среднее) генерация кода BIML/C#, автоматизация загрузки, сбора логов и генерации кода:
б. Реляционная модель данных, генерация кода BIML/C#, автоматизация загрузки, сбора логов и генерации кода (Data Vault (RAW Vault Buissness Vault), с технической версионностью):
Реляционная модель данных (Dimensional Fact modeling без технической версионности), без фреймворка для обслуживания:
2. ETL процессы Talend (Cronjob)
3. Хранение данных PosqreSQL
Факультет электроники и вычислительной техники, 230201 Информационные системы и технологии.
Прохождение обучения у вендора со сдачей теста на знание Arenadata DB