Курсы по gRPC

Подробный курс обучения языку программирования Go (Golang) в сервисе Яндекс Практикум. Онлайн-курс для освоения профессии Go-разработчика для разработчиков с опытом.

Программа «Архитектор ПО. Путь к мастерству в проектировании систем» подробно рассказывает о работе программного архитектора. Начать обучение можно с 5 бесплатных уроков*, а затем перейти к полной версии программы. Курс учит планировать будущее развитие сложных систем с нуля: выбирать инструменты и средства моделирования архитектуры, формат документирования архитектурных решений, выбирать архитектурный стиль под конкретную бизнес-задачу, планировать будущее масштабирование, гибкость. Знакомит с лучшими практиками построения архитектуры программного обеспечения.

Тема 1: Понятия архитектуры: основные термины и определения.

Тема 2: Понятия архитектуры: критерии качества архитектуры.

Тема 3: Роли и виды архитекторов.

Тема 4: Архитектурные стили: монолит.

Тема 5: Архитектурные стили: микросервисы.

Тема 6: Принципы DDD.

Тема 7: Clean Architecture: правила создания архитектур.

Тема 8: Архитектурные стили: событийно-управляемая архитектура.

Тема 9: Архитектурные стили: классический ETL/DWH/BI.

Тема 10: Позиция архитектора в Agile-проекте.

Практика: Проект «Mobile Street Food». Этап работ: предложить разбиение системы на модули/микросервисы. Отобразить связи модулей/микросервисов на компонентной диаграмме.

Итого на курс 24 часа:

• теория — 10 ч.,
• практика — 14 ч.

Тема 1: Управление заинтересованными сторонами (стейкхолдерами) проекта.

Тема 2: Виды требований и атрибуты качества.

Тема 3: Влияние нефункциональных требований на архитектуру.

Тема 4: Сбор и работа с функциональными требованиями.

Тема 5: Дополнительные виды требований: ограничения.

Тема 6: Управление критериями надёжности (SLA, SLO, SLI).

Тема 7: Работа с архитектурными изменениями.

Практика: Проект «Mobile Street Food». Этап работ: выделить наиболее приоритетные функциональные требования, сформулировать их в виде пользовательских историй. Сформулировать нефункциональные требования к системе в виде сценариев атрибутов качества. Составить требования к качеству системы с точки зрения масштабов и планов развития бизнеса.

Итого на курс 26 часов:

• теория — 10 часов,
• практика — 16 часов.

Тема 1: Проектирование от атрибутов качества.

Тема 2: Тактики и паттерны проектирования.

Практика: Проект «Mobile Street Food». Этап работ: ранжировать требования и выбрать тактики для достижения требований каждой из групп. Создать диаграмму/таблицу взаимосвязи требований.

Итого на курс 28 часов:

• теория — 10 часов,
• практика — 18 часов.

Тема 1: Задача коммуникации приложений.

Тема 2: Уровни (методы) интеграционных решений.

Тема 3: Шаблоны коммуникации в контексте приложений и микросервисной архитектуры: применение и практические сценарии.

Тема 4: Синхронное взаимодействие и REST: основы, генерация API и управление версиями.

Тема 5: REST API: рекомендации по дизайну, блокировкам, кешированию и версионированию.

Тема 6: OpenAPI Spec: интеграция и API First подход в создании удобных и гибких интерфейсов.

Тема 7: Архитектура сообщений: ключевые паттерны и методы разработки.

Тема 8: AsyncAPI: организация асинхронного взаимодействия.

Тема 9: Технологии асинхронного обмена сообщениями: RabbitMQ, Kafka в сравнении.

Тема 10: Интеграция баз данных и ETL: сильные стороны, метрики и методы оптимизации.

Тема 11: Capture Data Changes: анализ Debezium и его использование в различных сценариях.

Тема 12: Интеграция через файлы: особенности, преимущества и правила наименования.

Тема 13: Использование вспомогательных протоколов и средств интеграции API.

Практика: Этап работ: спроектировать REST API для работы с заказами с точки зрения клиентского приложения. Описать процессы взаимодействия «заказчик-исполнитель», приёма платежей, поддержки. Отобразить процессы на диаграмме потоков данных. Предложить значения для триггеров уведомлений службы поддержки.

Итого на курс 54 часа:

• теория — 27 часов,
• практика — 27 часов.

Тема 1: Реляционные и нереляционные базы данных: обзор, особенности и гарантии доступности.

Тема 2: Как выбрать базу данных на основании требований и контекста.

Тема 3: Организация конкурентного доступа: стратегии блокировок, изоляции транзакций и обеспечение согласованности; детали реализации транзакций и блокировок: обзор PostgreSQL, MySQL и их возможностей. CAP-теорема.

Тема 4: Современные тактики производительности реляционной базы данных.

Тема 5: Виды нереляционных баз данных: обзор, гарантии; отличия и детали реализации нереляционных баз данных.

Тема 6: Проектирование моделей данных.

Практика: Проект «Mobile Street Food». Этап работ: спроектировать модель данных системы, нарисовать ER-диаграмму. Выбрать базу данных и обосновать выбор.

Итого на курс 42 часа:

• теория — 20 часов,
• практика — 22 часа.

Тема 1: Технологии виртуализации.

Тема 2: Основы построения информационных сетей.

Тема 3: Архитектура Linux.

Тема 4: Основы CI/CD: построение процессов с использованием Jenkins, GitLab, Ansible.

Тема 5: Мониторинг и наблюдаемость системы: паттерны, инструменты и протоколы.

Тема 6: Проектирование облачной архитектуры: провайдеры, возможности, экономика.

Тема 7: Проектирование облачной архитектуры: паттерны.

Тема 8: Разработка 12-факторного приложения.

Тема 9: Контрактные обязательства сервиса: метрики надёжности, SLA, RTO, RPO и паттерны реализации.

Тема 10: Понимание Kubernetes: типы сущностей, Helm, CI/CD и балансировка трафика.

Практика: Проект «Mobile Street Food». Этап работ: выбрать технологии развертывания сквозного примера, нарисовать диаграмму развертывания, расположить программные элементы по элементам инфраструктуры. Описать метрики мониторинга, технические средства обеспечения отказоустойчивости и масштабирования. Выполнить предварительный расчёт оборудования продуктивной среды: CPU, RAM, Disk.

Итого на курс 42 часа:

• теория — 20 часов,
• практика — 22 часа.

Тема 1: UML для моделирования и анализа систем.

Тема 2: BPMN для моделирования бизнес-процессов.

Тема 3: Нотация 4+1 для анализа и проектирования архитектуры.

Тема 4: Нотация C4 для наглядного и эффективного проектирования архитектуры.

Тема 5: Изучение подхода ADR для документации архитектурных решений.

Тема 6: Язык ArchiMate.

Практика: Проект «Mobile Street Food». Этап работ: нарисовать BPMN-диаграмму для процесса заказа, оплаты и получения услуги с учётом начисления и списания баллов лояльности. Нарисовать две диаграммы последовательности (UML Sequence Diagram), отображающие работу с заказами.

Итого на курс 32 часа:

• теория — 10 часов,
• практика — 22 часа.

Тема 1: Сдавать задачи в срок: принципы личной эффективности.

Тема 2: Как развивать команду и выстраивать коммуникации.

Итого на курс 2 часа.

В ходе обучения вы будете работать над сквозным проектом «Mobile Street Food» под руководством опытного тренера. Проект предоставляет все необходимые материалы и шаблоны решений, которые станут полезными в вашей дальнейшей профессиональной деятельности. Выполняя задачи проекта, вы освоите навыки принятия решений, разработки архитектурных концепций и эффективного представления информации. Благодаря поддержке тренера, вы успешно завершите проект и получите ценные знания для уверенного старта в сфере разработки и инноваций.

О курсе

• Длительность 8 недель
• Занятия проходят в формате живых вебинаров, по индивидуальному расписанию

Как проходит занятие

Занятия включают:

• Теоретическую часть
• Сессию вопросов и ответов по пройденной теории
• Закрепление теории на практике
• Обратную связь по практическим и домашним заданиямт

Краткий список тем:

• Введение в микросервисную архитектуру — основы, преимущества, ограничения и отличие от монолитов
• Обзор DevOps и инфраструктуры для микросервисов — ключевые процессы и инструменты поддержки
• Domain-Driven Design (DDD) — единый язык, контекстные границы, доменные события и их роль
• Проектирование микросервисной архитектуры — стратегии миграции от монолита, паттерны "распила" и снижение зависимости
• Паттерны взаимодействия — синхронное (REST, GraphQL, gRPC) и асинхронное (Kafka, очереди, publish-subscribe)
• Управление данными — изоляция, согласованность, паттерн SAGA
  - Масштабирование и производительность — горизонтальное/вертикальное масштабирование, балансировка, кэширование
• Обеспечение отказоустойчивости — circuit breaker, retry, fallback
• Безопасность микросервисов — аутентификация, авторизация, шифрование, управление секретами
• Мониторинг и автоматизация — системы сбора логов, хэлсчеки, метрики, автоматизация тестирования

Вы узнаете, как разрабатывать гибкие и эффективные системы, соответствующие требованиям бизнеса. В курсе рассматриваются основные проблемы, связанные с реализацией микросервисной архитектуры, а также стратегии, механизмы, паттерны и инструменты для их решения. Практические упражнения позволят вам приобрести навык самостоятельного проектирования МСА систем. Курс поможет вам принимать обоснованное решение о применимости МСА в зависимости от потребностей бизнеса и возможностей команды.

Понятия монолита, SOA, MSA. Сравнение и обоснование выбора.

Оптимальный размер микросервиса. Разбиение на сервисы по бизнес-возможностям. Разбиение на сервисы по проблемным областям. Практики определения предметных областей. Декомпозиция по техническим и организационным аспектам.

Организация команд под MSA. Организация репозитория кода под MSA.

Паттерны взаимодействия. Синхронные и асинхронные механизмы взаимодействия. Оркестровка и хореография. Основные протоколы и технологии (REST, gRPC, GraphQL, Kafka, RabbitMQ и др.). Взаимодействие с внешними системами (API Gateway, BFF). Реактивные системы. Архитектуры, управляемые событиями. Разделение команды и запроса.

Паттерны работы с данными. Порождение событий. Справочные данные в MSA. Единый источник истины (Source of Truth) в MSA.

Модифицируемость. Решение проблемы высокой связанности. Версионирование интерфейсов и событий. Типы контрактов. Изменения событийной модели. Паттерны организации запросов. Микросервисное шасси (Microservice chassis). Сетки сервисов (Service Mesh).

Масштабируемость. Паттерны построения балансировщиков. Сервисы обнаружения и паттерны работы с ними.

Производительность. Паттерны производительности в MSA (переборка, изящная деградация и пр.).

Согласованность. Проблемы обеспечения согласованности в MSA. CAP теорема. Решения проблем согласованности. Двухфазные коммиты. Паттерн SAGA. Понижение уровня согласованности.

Надежность. Механизмы отказоустойчивости. Паттерны предохранитель (Circuit Breaker), дросселировка, зависимые таймауты и пр.

Безопасность. Механизмы обеспечения безопасности в MSA. Аутентификация. Авторизация. Защита периметра. Защита каналов связи. Основные протоколы и паттерны (OAUTH2, JWT, привратник, ключ камердинера и пр.).

Тестируемость. Пирамида и квадрат тестирования. Особенность тестирования микросервисов. Модульное тестирование. Интеграционное тестирование. Компонентное тестирование. Тестирование E2E. Паттерны тестирования MSA.

Удобство обслуживания. Возможность наблюдения (Observability). Паттерны наблюдения (распределенная трассировка, агрегация журналов). Мониторинг и журналирование. Конфигурирование микросервисов. Вынесение конфигурации во вне. Поддержка системы.

Паттерн «Deployment pipeline». Паттерны развертывания. Использование технологий Docker и Kubernetes. Использование сетки ISTIO. Бессерверное развертывание. Стратегии развертывания (сине-зеленые, канареечные и т.д.).

Стратегии перехода с монолита на микросервисы. Удушение монолита (Strangler monolith). Паттерны удушения. Связь микросервиса с монолитом. Миграция базы данных.

Освойте Golang от основ до продвинутого уровня и создавайте современные приложения.

В ходе курса вы узнаете о преимуществах и областях применения Golang.

Вы изучите основные концепции:

• Переменные;
• Типы данных;
• Операции;
• Управляющие конструкции.

Основные темы курса:

• Плюсы и минусы;
• Сферы применения;
• Кто использует;
• Типизация в Go;
• Объявление переменной;
• Операция присваивания;
• Указатели;
• Расположение переменных в памяти;
• Понятие "zero value";
• Приведение типов;
• Дженерики;
• Конструкции if ... {} else {}, switch;
• Условия и логические операции;
• Цикл for;
• Метки;
• Виды функций;
• Сигнатура функции;
• Передача аргументов в функцию по ссылке и по значению;
• Области видимости, {};
• Ошибки, связанные с областью видимости;
• Замыкания;
• Затенения;
• Определение структур;
• Инкапсуляция полей структуры;
• Композиция;
• Выравнивание;
• Методы;
• Утиная типизация;
• Композиция интерфейсов;
• Утверждение типов;
• Конструкция type switch;
• Определение и реализация интерфейсов;
• Внутреннее устройство интерфейса;
• Влияние использования интерфейсов на производительность программы;
• Значение типа интерфейс и ошибки, связанные с nil;
• Правила присваивания значений переменным типа интерфейс;
• Опасное и безопасное приведение типов (type cast);
• Массивы и слайсы, мапы;
• Длина и ёмкость;
• Внутренняя структура слайсов и мап;
• Различные способы итерации;
• Частые ошибки и затруднения;
• Строки, руны и массивы байт;
• Стандартные функции для работы со строками и Unicode;
• Работа со строками через strings.Builder;
• Интерфейс error;
• Конструкция defer;
• Функции panic и recover;
• Кастомные ошибки;
• Обертывание ошибок;
• Сопоставление ошибок;
• Виды и назначение тестов, пирамида тестирования;
• Понятие табличных тестов;
• Пакет gomock для тестирования;
• Golden files;
• Fuzzing;
• Горутины и каналы;
• Сравнение буферизированных и небуферизированных каналов;
• Использование каналов для передачи данных и синхронизации;
• Получение данных из канала: select, range;
• Пул объектов sync.Pool;
• Мьютексы sync.Mutex/RWMutex;
• Словарь sync.Map;
• Условные переменные sync.Cond;
• Группа ожидания sync.WaitGroup, errgroup.WithContext;
• Атомарные операции — пакет atomic;
• Гарантировано одноразовое выполнение sync.Once;
• Понятие сериализации/десериализации;
• Протоколы JSON, XML, protobuf, gob;
• Структурные тэги;
• Архитектура Интернета;
• Клиент-серверное взаимодействие;
• Пакет net/http, работа с HTTP;
• Пакет net, работа с низкоуровневыми протоколами;
• CRUD, REST;
• OpenAPI, Swagger;
• Oauth, basic, jwt;
• Различные варианты конфигурации программы;
• Использование простых форматов конфигурации: .ini, .yaml, .json и т.п.;
• Чтение конфигурации из окружения;
• Библиотека для работы с конфигурацией: viper;
• Стандартная библиотека для логирования;
• Использование интерфейсов для логирования;
• Расширенное логирование на примере zerolog;
• Реляционные/нереляционные СУБД и области их применения;
• Основные понятия реляционных БД;
• Подключение к СУБД и настройка пула соединений;
• Выполнение SQL-запросов и получение результатов;
• Стандартные интерфейсы sql.DB, sql.Rows и sql.Tx;
• Использование транзакций;
• SQL-инъекции;
• Работа с базами данных через пакет gorm;
• Работа с базами данных через пакет sqlx;
• Сравнение монолитной и микросервисной архитектур;
• Плюсы и минусы микросервисов;
• Понятие 12-факторного приложения;
• Пример микросервисов на Golang (сервис регистрации пользователей и сервис рассылки уведомлений);
• gRPC и protobuf;
• Создание gRPC клиента и сервера, лучшие практики gRPC;
• Интерсепторы, надежность (ретраи, задержки);
• LS при работе с gRPC;
• Событийно-ориентированные архитектуры;
• Apache Kafka;
• NATS;
• RabbitMQ;
• Примеры работы с RabbitMQ из Go;
• Возможные проблемы с очередями: перегрузка, падение обработчиков, сбойные сообщения и пр.;
• RequestId;
• OpenTelemetry;
• Jaeger;
• Работа с многими каналами: fan in, fan out;
• Pipelines;
• Cancellation;
• Graceful shutdown;
• Особенности памяти программы на Go;
• Выделение и освобождение памяти на стеке и куче;
• Escape analysis;
• Механизм сборки мусора в Go;
• Обработка аргументов командной строки: flags, pflag;
• Работа с сигналами ОС;
• Запуск внешних программ;
• Стандартные интерфейсы io.Reader, io.Writer и io.Closer;
• Последовательные и произвольные доступы и интерфейс io.Seeker;
• Буферизация ввода/вывода и оптимизация копирования;
• Работа с каталогами;
• Работа с файлами;
• Работа с потоками ввода/вывода;
• Regex;
• Использование пакета reflect;
• Плюсы и минусы рефлексии;
• Reflect.Type и reflect.Value;
• Примеры использования рефлексии;
• Пакет unsafe и тип unsafe.Pointer;
• Понятие кодогенерации, инструмент `go generate`;
• Полезные библиотеки, использующие кодогенерацию: impl, stringer, jsonenums, easyjson и пр.;
• Работа с AST, практическая кодогенерация;
• Бенчмарки;
• Pprof;
• Профилирование;
• Cache miss, cache hit;
• Прогрев кэша;
• LRU, LFU кэш;
• Инвалидация кэша;
• Ленивый кэш;
• Вытеснение данных;
• Основные структуры планировщика: P, M, G;
• Механизм переключения горутин;
• Обработка системных и сетевых вызовов планировщиком.

Создайте свое web-приложение и научитесь эффективно работать в Scrum-команде.