Как обрабатывать ситуацию, когда внешний сервис периодически недоступен или отвечает с ошибками?

Question

Нужно считать сбои внешнего сервиса нормальной ситуацией и обрабатывать их явно. Используются таймауты, ограниченные ретраи и circuit breaker. Важно различать временные и фатальные ошибки. Для бизнеса часто применяют fallback или деградацию функциональности. Логирование и метрики обязательны для контроля.

YeaHub · Accepted Answer

Нестабильность внешних сервисов — не исключение, а рабочий сценарий. Архитектура должна быть к этому готова.Базовый принципСначала важно зафиксировать: внешний сервис всегда может быть недоступен, и это не должно ломать всю систему.Основные механизмы обработкиTimeoutограничивает время ожиданияпредотвращает зависание воркеровRetryтолько для идемпотентных операцийс ограничением количества и задержкойCircuit breakerвременно отключает вызовы при массовых ошибкахзащищает систему от каскадных отказовFallbackвозврат кешированных или упрощённых данныхчастичная деградация функциональностиFail-fastбыстрое завершение запроса при явной недоступностиПример с retry и timeoutasync def fetch():
    try:
        return await http_call(timeout=2)
    except TimeoutError:
        return fallback_data()
Ошибки, которые часто допускаютБесконечные ретраиОдинаковая логика для всех ошибокОтсутствие метрик по отказамЖёсткая зависимость бизнес-логики от внешнего APIВыводКорректная обработка недоступных внешних сервисов строится на таймаутах, ограниченных ретраях, деградации и защите от каскадов. Это делает систему предсказуемой под нагрузкой.