Состояние Dead в жизненном цикле контейнера (containerd / runc)

Статус Dead означает фатальное состояние контейнера, при котором демон dockerd не может гарантировать корректность его файловой системы или сетевого окружения. Ошибка Error response from daemon: unable to inspect container: dead container или невозможность выполнить удаление docker rm возникает, когда процесс-прослойка (containerd-shim) аварийно завершился, точки монтирования OverlayFS/Volumes остались заблокированы ядром Linux (busy inode), либо демон Docker потерял дескриптор сетевого пространства имен.

Бизнес-риски:

Утечка файловых дескрипторов и памяти хоста, невозможность пересоздать сервис с тем же именем, деградация кластерных агентов мониторинга и оркестрации.

Таблица состояний контейнера в рантайме Docker

Пошаговое принудительное удаление и освобождение ресурсов

Сценарий 1: Принудительное удаление контейнера через CLI

Попытайтесь выполнить каскадное принудительное удаление контейнера и его томов:

# Принудительное удаление мертвого контейнера (-f: force, -v: volumes)
docker rm -f -v <container_id_or_name>

# Массовое удаление всех контейнеров в статусе dead:
docker rm -v $(docker ps -a -q -f status=dead)

Сценарий 2: Поиск и размонтирование заблокированных точек (Unmount)

Если Docker не может удалить контейнер из-за ошибки device or resource busy:

# Поиск зависших точек монтирования overlay для конкретного контейнера
grep -E '/var/lib/docker/overlay2' /proc/mounts | grep <container_id>

# Принудительное ленивое размонтирование (Lazy Unmount)
umount -l /var/lib/docker/overlay2/<layer_id>/merged

# Повторная попытка удаления контейнера
docker rm -f <container_id>

Сценарий 3: Завершение зависших shim-процессов и перезапуск containerd

Если ядро удерживает shim-процесс в состоянии зомби (D state):

# Поиск висячих процессов containerd-shim
ps aux | grep containerd-shim | grep <container_id>

# Завершение процесса по PID
kill -9 <shim_pid>

# Перезапуск подсистем контейнеризации
systemctl restart containerd
systemctl restart docker

Типовые ошибки администраторов

• Перезагрузка физического сервера 'reset': Принудительная перезагрузка ноды с зависшими дисковыми операциями может привести к повреждению всей структуры /var/lib/docker.
• Попытка прямого удаления папок контейнера через rm -rf: Удаление каталога контейнера при смонтированном overlay приводит к удалению исходных файлов на хосте!