EAS-004 Основы хранилищ данных

Курс дает представление о подходах к проектированию хранилищ данных и их использованию в гетерогенных информационных системах предприятий. Вы рассмотрите вопросы выбора архитектуры, методов внедрения и сопровождения хранилищ данных.

Модуль 1

• Понятие «хранилище данных». Его возможности и ограничения.
• Зачем создается DWH, какую бизнес-задачу оно решает.
  

Модуль 2

• Классические подходы к проектированию хранилищ данных.
• Типовые компоненты и протекающие процессы.
• Концепции Инмона, Кимбалла и DataVault.
• Обзор основных компонентов (stage, ods, dds, datamart, bi, metadata) и процессов (ETL, ELT, DQ, lineage).
  

Модуль 3

• Общие и частные вопросы управления данными предприятия.
• Информация рассматривается как актив, приносящий ценность и имеющий затраты на получение.
• Концепция мастер-данные» и системы по их управлению – MDM.
  

Модуль 4

• Шаги проектирования хранилища. 
• Типовые приемы и инструментарий при создании. 
• Экспертиза участников и инфраструктуры.
  

Модуль 5

• Потребность в хранении исходных данных из системы источника. 
• Типичные ошибки при организации данной области и ее отличие от «озера данных». 
  

Модуль 6

• Слои операционного и многомерного хранения данных. 
• Процессы извлечения, очистки, контроля и сохранения - ETL\ELT. 
• Трансформация в целевую схему хранения. 
  

Модуль 7

• Типовые сценарии использования данных из хранилищ. 
• Основные потребители - системы бизнес-аналитики «BI». 
• Устройство типовой БИ системы и причины их большого разнообразия. 
  

Модуль 8

• Обзор основных проблем, с которыми сталкиваются хранилища при росте.
• Новые вызовы в области машинного обучения. 
• Концепция Data Mesh как альтернатива дальнейшего развития.