Data engineer
Требования
Местоположение и тип занятости
Компания
Описание вакансии
Условия работы
Sber CIB – инвестиционно-банковский бизнес Сбера, крупнейший инвестиционный банк в стране.
Проекты в команде трансформации Sber CIB – это внедрение изменений в работу с ключевыми клиентами. В список клиентов входят крупнейшие нефтегазовые, строительные, финансовые и не только корпорации РФ, которые формируют экономику страны. Мы работаем по всем продуктовым решениям Сбера: банковским, инвестиционным и экосистемным. У вас будет возможность прикоснуться к реальному бизнесу, изучить процессы по инвестициям и финансированию и сделать уникальные для этого бизнес-сегмента digital решения.
Мы ищем человека, который будет участвовать в разработке одного из стратегических направлений трансформации Sber CIB.
Технологический стек: Greenplum, Hadoop, Hive, Spark, Kafka, Airflow, Informatica, Python, Grafana, Qlik Sense, ML/DL Libraries
Что надо делать:
- Разрабатывать и оптимизировать Data Warehouse (Greenplum, Hadoop) с использованием техник моделирования Data Vault и Star/Snowflake Scheme
- Разрабатывать и оптимизировать ETL/ELT потоки загрузки данных из различных источников данных (Hadoop, Greenplum, flat files, kafka, REST API, etc)
- Настраивать devops конвейеры и оптимизировать/автоматизировать существующие процессы разработки
- Писать авто-тесты и регресс тесты
Что требуется:
- Понимание теории баз данных (основные понятия, уровни изоляции транзакций, нормализация и т.д)
- Уверенное знание SQL и его расширений (T-SQL, PL/SQL etc)
- Понимание принципов разработки и оптимизации в одной из промышленных СУБД (Oracle, Teradata, SQL Server, Greenplum, и т.д.)
- Понимание принципов моделирования Data Warehouse и Data Marts (Dimensional modeling, Data Vault, etc)
- Способность разобраться в чужом коде (SQL, T-SQL, PL/SQL, Python, bash)
- Опыт разработки ETL/ELT конвейеров данных, забор данных по API, разбор не структурированных и слабоструктурированных данных
- Опыт работы в *nix окружении, умение применять базовые команды в терминале
- Опыт работы с системами контроля версий
- Умение работать в команде, time-management, ответственность и самостоятельность
Будет плюсом:
- Знание Qlik Sense
- Продвинутые навыки UX/UI-дизайна, опыт создания красивых UI
- Опыт моделирования витрин данных - Star/Snowflake Scheme, Dimensional modeling
- Опыт использования инструментов моделирования – SAP PowerDesigner, Erwin, etc.
- Знание процедурных расширений SQL (T-SQL, PL/SQL, PL/pgSQL)
- Опыт оптимизации SQL-запросов в СУБД
- Опыт применения скриптовых языков программирования: bash, powershell etc
Что мы предлагаем:
- Новый, современный офис;
- Интересные, сложные, амбициозные задачи;
- Профессиональный рост в молодой и сильной команде;
- Гибкий график начала рабочего дня;
- Стабильная, конкурентная «белая» заработная плата (оклад + премии);
- Льготные условия по кредитам Сбербанка;
- ДМС, страхование от несчастных случаев, социальные гарантии, корпоративные мероприятия;
- Тренажерный зал.