Какие стратегии retry вы знаете и как избежать повторной обработки данных?

Question

Retry применяют при временных ошибках и всегда ограничивают по количеству и времени. Используют фиксированную задержку, exponential backoff и jitter. Чтобы избежать повторной обработки, операции делают идемпотентными. Также применяют дедупликацию по ключам и хранение состояния обработки. Без этих мер retry быстро приводит к дубликатам и перегрузке системы.

YeaHub · Accepted Answer

ОпределениеRetry-стратегия — это политика повторного выполнения операции при ошибке с контролем количества попыток и интервалов между ними.Основные стратегии retryFixed delayПовтор через одинаковый интервал.Простая, но плохо ведёт себя при пиковых сбоях.Exponential backoffИнтервал увеличивается с каждой попыткой.Снижает нагрузку на проблемный сервис.Backoff с jitterДобавляется случайное отклонение.Предотвращает синхронные повторы (thundering herd).Limited retryЖёсткий лимит попыток.После превышения — DLQ или ручная обработка.Как избежать повторной обработки данныхИдемпотентностьПовторный вызов не меняет результат.Ключ операции (idempotency key).ДедупликацияХранение обработанных идентификаторов.Проверка перед выполнением.Хранение состоянияФиксация этапов выполнения.Повтор продолжается с нужного шага.ВыводRetry без идемпотентности опасен; безопасный retry — это backoff + лимиты + контроль повторов.