Является ли хранение сообщения в брокере гарантией доставки?

Question

Само по себе хранение сообщения в брокере не гарантирует его доставку consumer’у. Гарантии зависят от конфигурации брокера, producer’а и consumer’а. Возможны потери, дублирование или повторная обработка. Для надежной доставки нужны дополнительные механизмы. Поэтому всегда важно понимать выбранную модель доставки.

YeaHub · Accepted Answer

Хранение сообщения в брокере — это лишь часть цепочки доставки, а не абсолютная гарантия.Что значит «гарантия доставки»Под гарантией доставки обычно понимают, что сообщение:не потеряетсябудет доставлено consumer’убудет обработано корректноНо брокер отвечает только за хранение и передачу, а не за бизнес-обработку.Возможные модели доставкиВ системах сообщений используются три основные модели:At most onceСообщение может быть потеряно, но не будет доставлено повторно.At least onceСообщение доставляется минимум один раз, возможны дубликаты.Exactly onceСообщение доставляется и обрабатывается ровно один раз.Хранение сообщения обычно обеспечивает максимум at least once, но не автоматически.Почему хранение — не гарантияДаже если сообщение записано в брокер:consumer может упасть до коммитаoffset может быть зафиксирован раньше обработкиproducer может отправить сообщение повторносеть может дать сбойБез корректной логики consumer’а сообщение:потеряетсяобработается дваждыостанется необработаннымЧто действительно влияет на надежностьстратегия коммита offset’овidempotent-обработкаretry-механизмынастройки брокераВывод: хранение сообщения — необходимое, но недостаточное условие надежной доставки.