Курсы по Администрированию баз данных

На курсе MT_LPIC-Tshoot - Linux уровень 4. Диагностика и устранение неполадок в Linux (Линукс) слушатели знакомятся с теоретически структурированной формой поиска и устранения неисправностей. Этот подход используется для диагностики различных типов проблем, включая проблемы начальной загрузки, аппаратные проблемы, проблемы хранения, проблемы установки и работы с программными пакетами, сетевые проблемы, различные проблемы приложений, вопросы безопасности и проблемы ядра Linux (Линукс). В лабораторных работах рассматриваются разнообразные проблемы, что позволяет слушателям усовершенствовать свои навыки по устранению неисправностей и сбоев.

Данный курс и накопленный персональный опыт администрирования дают возможность подготовиться к сдаче экзаменов аналогичных традиционным Red Hat Certified Specialist in Linux Diagnostics and Troubleshooting и RHCA — Red Hat Certified Architect. Программа курса соответствует RH342.

Работа на курсе происходит с двумя дистрибутивами: CentOS и Debian. В зависимости от состава группы, определяется основной дистрибутив для проведения обучения и на его примере выполняются лабораторные работы.

(Есть два формата проведения: онлайн и очно.)

Обзор современных методов управления данными от реляционных СУБД до NoSQL. Узнайте, как выбрать правильную систему для ваших задач и оптимизировать ее использование. Курс охватывает эволюцию хранилищ данных, реляционные и нереляционные модели, распределенные файловые системы и системы обработки потоков данных.

• Базы данных
• Хранилища данных
• Машины баз данных
• Массово-параллельные архитектуры
• Гиперконвергенция
• Какие проблемы решает, за счет чего
• Репликация
• Шардинг
• Распределенные транзакции
• Варианты структуры ключа
• Варианты структуры значения
• Программные интерфейсы
• Эффективность применения нереляционных баз данных: необходимые и достаточные условия [Cassandra, HBase]
• Модель [MongoDB]
• Архитектура кластера.[HDFS]
• Варианты архитектур, форматы файлов, ограничения, транзакции [Hive,Spark,Spark SQL,Parquet,ORC]
• Распределенные системы хранения данных в оперативной памяти [Hazelcast,Ignite,Tarantool]
• Распределенные OLAP-системы [Clickhouse, Druid]
• Обработка потоков данных [Spark Streaming]
• Самонастраиваемые и автономные базы данных

Освоите базовые принципы DevOps и научитесь применять лучшие практики для разработки качественного и востребованного ПО

Курс для начинающих изучение Django. Представляет собой реализованный с нуля пет-проект с пошаговым объяснением всех действий. В курсе нет уроков в формате видео.

АНО ДПО СИТИ Столица предлагает актуальную и практикоориентированную программу профессионального обучения, учитывающую современные тенденции и требования отрасли. Основные преимущества курса: Соответствие последним нормативным и законодательным требованиям — программа отражает современные стандарты в области системного администрирования и информационных технологий. Глубокое изучение технологий и инструментов — слушатели осваивают управление серверными системами, сетями, базами данных, а также вопросы информационной безопасности. Практическая направленность обучения — курс включает лабораторные работы, кейсы и моделирование реальных ситуаций, что способствует эффективному применению знаний в профессиональной деятельности.

Освойте Cassandra — высокопроизводительную NoSQL-СУБД для работы с большими данными. Курс раскрывает архитектуру, язык CQL и тонкости проектирования данных для Cassandra. Уникальность — практическое освоение кластерных развертываний, мониторинга и интеграции с Java-приложениями.

• Области применения, типичные use case и анти-use case.
• Архитектура, репликация, управление согласованностью данных.
• Процесс записи данных, отложенная запись.
• Процесс чтения данных, восстановление данных.
• Объединение хранимых данных и очистка удаленных данных.
• Практика 1. Установка и развертывание кластера (Docker Compose).
• Практика 2. Использование Nodetool для исследования состояния кластера.
• Модель данных CQL.
• Первичные ключи и их структура.
• CQL: язык запросов Cassandra.
• CQL: Типы данных, коллекции, вложенные данные, устаревание данных.
• Запросы на CQL.
• Практика 3. Создание таблиц с первичными ключами разной сложности и исследование поведения запросов.
• Диаграммы Чеботко для логических и физических моделей данных.
• Лучшие практики моделирования данных для Cassandra.
• Проектирование таблиц и выбор ключей.
• Моделирование данных от запросов.
• Вторичные индексы.
• Материализованные представления.
• Практика 4. Проектирование логической и физической модели данных.
• Архитектура Java-драйвера.
• Основы Java API.
• ORM.
• Практика 5. Создание приложения, использующего Java драйвер для доступа к Cassandra.
• Зависимости: версии Java/JDK.
• Развертывание кластера on-premise, в облаке, в Kubernetes.
• Определение потребности в ресурсах: память, CPU, диск.
• Мониторинг: сбор и агрегация метрик.
• Принципы настройки производительности.
• Практика 6. Сбор метрик с кластера.
• Практика 7. Использование Nodetool для наблюдения за процессами в кластере.
• Подключение и отключение узлов.
• Обновление версий.
• Системное пространство ключей.
• Управление хранением данных.
• Управление сжатием (compaction) данных.
• Резервное копирование и мгновенные снимки.
• Исправление поврежденных файлов данных.
• Практика 8. Исследование подключения/отключения узлов и других служебных операций.

Введение в Apache Kafka: стриминговая платформа для обработки данных в реальном времени. Освоите основы Apache Kafka и научитесь разрабатывать распределенные стриминговые приложения. Получите практический опыт работы с экосистемой Kafka, включая настройку кластеров, разработку клиентских приложений и использование KSQL.

• Что такое Kafka.
• Примеры удачного и неудачного использования Kafka.
• Kafka и база данных: сходства и различия.
• Kafka и прямые конкуренты.
• Kafka и Apache Pulsar.
• Архитектура хранилища Kafka: Брокеры, Темы, Разделы, Сегменты, Реплики.
• Архитектура кластера Kafka: Zookeeper, партиционирование, главные и ведомые узлы репликации, ISR.
• Клиенты и API.
• Практика 2.1: запуск кластера Kafka с помощью Docker.
• Установка Zookeeper.
• Установка брокеров Kafka.
• Самые популярные инструменты Kafka.
• Демо 3.1: Инструменты Kafka.
• Практики KafkaOps.
• Kafka Producer API: основы.
• Практика 4.1: Отправка одного сообщения.
• Kafka Consumer API: основы, группы потребителей.
• Практика 4.2: Один получатель.
• Практика 4.3: Несколько получателей в одной группе.
• Дополнительные возможности: Пакеты, Повторы, Идемпотентность, Транзакции, Перебалансировка Групп Потребителей.
• Практика 4.4: Транзакционный Отправитель.
• Практика 4.5: Отправка и получение в транзакции.
• Практика 4.6: Замороженный потребитель.
• Практика 4.7: Медленный потребитель.
• Безопасность: SSL, SASL, Kerberos.
• REST Proxy: отправка и получение сообщений в форматах JSON, бинарные и Авро файлы.
• Практика 5.1: доступ через REST Proxy.
• Schema Registry: реестр схем.
• Практика 5.2: Schema Registry.
• Kafka Streams: DSL, API, StreamBuilder, создание и реализация топологии.
• Устройство Kafka Streams: многопоточность, несколько экземпляров и задач.
• Практика 6.1: Реализация потоков без сохранения состояния.
• Обработка с сохранением состояния: хранилище состояний, отказоустойчивость для хранилищ состояний.
• Практика 6.2: Агрегация в Kafka Streams.
• KTable: Потоки обновления данных, кэширование, скорость выдачи, агрегация.
• Окна в потоках: метки времени, плавающие, прыгающие, сеансовые.
• Соединение: поток с потоком, KTable с KTable, поток с KTable.
• Практика 6.3: Соединение потоков и таблиц.
• KSQL: Потоки без программирования.
• KSQL Серверная архитектура.
• Практика 6.4: Реализация потоков без сохранения состояния в KSQL.
• Практика 6.5: Агрегация в KSQL.
• Практика 6.6: Соединение в KSQL.
• Архитектура Kafka Connect.
• Источники Kafka Connect.
• Практика 7.1: JDBC Source Connector (postgres).
• Практика 7.2: JDBC Source Connector (postgres) с ключами.
• Kafka Connect Sinks.
• Практика 7.3: JDBC Sink Connector (postgres).
• Практика 7.4: JDBC Sink Connector (postgres) с ключами.
• Цели по производительности и режимы выполнения.
• Zookeeper: конфигурация, автономный режим и режим кворума, CLI.
• Управление и мониторинг кластера.
• Практика 8.1: Мониторинг кластера Kafka с помощью Prometheus.
• Практика 8.2: Измерение производительности.
• Различные мультикластерные архитектуры MirrorMaker.
• Практика 9.1: Использование MirrorMaker для синхронизации кластеров.
• Confluence Replicator.

Научитесь превращать сырые данные в мощные бизнес-решения за 8 недель!

Курс даёт практические навыки работы с реальными данными: от очистки до построения предсказательных моделей. Вы узнаете, как избежать распространенных ошибок и повысить качество ваших проектов.

• Цели, задачи, парадигмы моделирования.
• Определение границ модели, масштаба и временных интервалов.Переходы между уровнями, отличия концептуальной, логической и физической моделей.
• Преобразование CDM → LDM → PDM на примере модели данных.Типы связей (1:1, 1:M, M:M), нормализация (1NF, 2NF, 3NF), иерархические структуры.
• Нормализация таблиц, построение иерархий. Жизненный цикл сущностей
• Построение жизненного цикла заказа в интернет-магазине. Аудит данных, деревья, симметричные связи, искусственные уровни.
• Исправление антипаттернов. Критерии оценки качества модели (корректность, полнота, структура).
• Анализ реальной модели по шкале ScoreCard.Создание CDM/LDM/PDM для системы разграничения прав доступа.
• Разбор сложных случаев, ответы на вопросы.

На курсе вы получите углубленные знания и навыки для успешного администрирования сервера PostgreSQL. Программа обучения включает изучение многоверсионности, журналирования, блокировок, управления расширениями, локализации и обновления сервера. По окончании вы сможете эффективно администрировать PostgreSQL и обеспечивать надежность и производительность баз данных.

• Изоляция
  • Страницы и версии строк
  • Снимки данных
  • HOT-обновления и самоочистка
• Очистка
  • Очистка
  • Автоочистка
  • Заморозка
• Буферный кеш
  • Буферный кеш
  • Журнал предзаписи
  • Контрольная точка
  • Настройка журнала
• Блокировки
  • Блокировки объектов
  • Блокировки строк
  • Блокировки в оперативной памяти
• Управление расширениями
• Локализация
• Обновление сервера