Ожидаю на новой работе много боевых и интересных задач.
Хочу расти стремительно без передышки.
-Проектирование/написание/отлаживание/тестирование/мониторинг pipeline'ов (Airflow)
-Написание/тестирование потоковых приложений (spark-streaming)
-Интеграция алгоритмов рекомендательной системы
-Написание/внедрение/мониторинг метрик (prometheus/grafana)
-Написание/оптимизация sql-запросов
-Написание bash-scripts
-adhoc запросы
-Загрузка/выгрузка/обработка данных
-Автоматизация/оптимизация процессов
-Репликация источников
-Рефакторинг кода
-Работа с API
-Документирование
Стек: python/Django/postgresql/Telegram-bot/celery/Docker/Bash-scripts
-Построение архитектуры БД
-Написание API
-Добавление фичей(Идемпотенция запросов, recaptcha)
-Настройка Admin Panel
-Поднятие сервисов (PgAdmin)
-Написание Bash-script'ов
-Рефакторинг кода
Работаю в СберБанке на позиции Data Engineer в проекте по созданию Голосового Ассистента.
Стек: Python/postgresql/flask
Мои задачи на позиции Data Engineer:
-Построение Базы Данных, создание витрины
-Написание логики для распределения данных по Базе Данных(функции, процедуры, триггеры, материализованные представления)
-Написание загрузочного скрипта для загрузки источников по API
-Поднятие сервисов(оркестратор, оболочка БД для отправки запросов)
-Написание скриптов для автоматизации загрузки sql-скриптов в БД, загрузки данных из источников
-Создание дампов
-Написание документации по архитектуре БД
-Композиция и декомпозиция sql-скриптов
Институт Радиоэлектронных и Фотонных Цифровых Технологий, кафедра Радиофотоники и Микроволновых технологий. Защитил диплом на тему "Волоконно-Брэгговоские Решетки". Моделировал результаты в Matlab и проводил физический экспериент.
За время обучения в университете было написано 3 технические статьи на тему моего Диплома, 1 статья по английскому языку.
На курсе изучил теоретически и практически linear-regression, multy-polynomial regression, logistic regression(binary and multy-classification), Neural Networks(FFNN), Gradient Descent, OneVsAll, OverFitting, Underfitting, standartization and normalization, linear algebra, math statistic
Написал проекты по Data Science по созданию личных моделей:
-Linear Regression(задача обучения модели с использованием градиентого спуска и предсказывания цены автомобиля в зависимости от его пробега)
https://github.com/Ruslan3811/linear_regression
-Logistic Regression (предобработка данных, задача мультиклассовой классификации, обучение модели при помощи gradient descent и stochastic gradient, предсказание методом onevsall, написание функций визуализации аналогично scatter-plot, pair-plot, histogram, статистической функции - describe)