Nginx перестает отправлять запросы на один или несколько серверов из балансировочного пула, возвращая клиентам ошибки 502 Bad Gateway или 504 Gateway Timeout. В журнале фиксируется исключение ноды: upstream server <IP:port> is temporarily blacklisted due to fail_timeout или no live upstreams while connecting to upstream.

• Полноценно работающий бэкенд перестает получать запросы из-за разового долгого SQL-запроса или всплеска latency.
• При высокой нагрузке серверы поочередно выпадают в блэклист («эффект домино»), полностью парализуя сервис.

1. Откройте конфигурацию балансировочного пула в nginx.conf.
2. Увеличьте порог допустимых ошибок max_fails и скорректируйте окно тайм-аута fail_timeout:

   upstream backend_cluster {
       # Разрешаем до 5 сбоев в течение 30 секунд перед временным отключением ноды на 15 секунд:
       server 10.0.1.10:8080 max_fails=5 fail_timeout=30s;
       server 10.0.1.11:8080 max_fails=5 fail_timeout=30s;
       server 10.0.1.12:8080 backup;
   }

3. Если вы хотите полностью отключить механизм исключения серверов (чтобы Nginx всегда пытался отправить запрос):

   upstream backend_cluster {
       server 10.0.1.10:8080 max_fails=0;
       server 10.0.1.11:8080 max_fails=0;
   }

4. Точно настройте условия, при которых ошибка считается сбоем ноды (исключив клиентские ошибки 4xx и некритичные статусы):

   location / {
       proxy_pass http://backend_cluster;
       # Переключаться на следующий бэкенд только при явных фатальных ошибках:
       proxy_next_upstream error timeout invalid_header http_502 http_503;
       proxy_next_upstream_tries 3;
       proxy_next_upstream_timeout 10s;
   }

5. Проверьте синтаксис и примените конфигурацию: sudo nginx -t && sudo systemctl reload nginx.