Как устроена Kafka на логическом уровне?

Kafka на логическом уровне состоит из broker’ов, topic’ов, partition’ов, producer’ов и consumer’ов. Producer’ы отправляют сообщения в topic’и, а consumer’ы их читают. Topic делится на partition’ы для масштабирования и параллелизма. Consumer’ы объединяются в группы для распределения нагрузки. Kafka хранит сообщения упорядоченно внутри partition’а.