Асинхронные микросервисы с Apache Kafka на Python [Stepik] [Владимир Кириевский]

[Bot]

Перед тем как приступить к работе

1. Системные требования
2. Как загрузить репозиторий с уроками
3. Как настроить IDE и загрузить необходимые библиотеки
4. Как установить Kafka
5. Как установить Offset Explorer
6. Для самых ленивых: готовый образ VirtualBox со всем необходимым

Основы Apache Kafka

1. Основные понятия Kafka

Основы работы с Kafka на python

1. Создаем продюсер и консюмер
2. Один продюсер, два консьюмера
3. Один продюсер, три консьюмера, две группы
4. Два продюсера, два топика, один консьюмер
5. "Осиротевшая партиция" и ребалансировка
6. Распределение по партициям сообщений с разными ключами
7. Работа без автоматического коммита: транзакции

Сериализация данных

1. Сериализация данных в json
2. Применение pydantic
3. Практический пример: приложение сбора данных

Асинхронная работа

1. Что почитать про asyncio
2. Создаем продюсер и консьюмер с использование aiokafka
3. Интегрируем Kafka с веб-приложением на FastApi

Потоковая обработка данных с фреймворком FastStream

1. Основы работы с FastStream

Послесловие

1. Заключение