DockerContainerRestartLoop: что делать при алерте

Правило алерта

alert: DockerContainerRestartLoop
expr: changes(container_start_time_seconds{name!=""}[15m]) >= 3
for: 1m
severity: critical

Сообщение алерта: Контейнер {{ $labels.name }} постоянно перезапускается ({{ $labels.instance }})

Что значит

За последние 15 минут контейнер запускался заново 3 раза и более (по изменению container_start_time_seconds). Процесс падает сразу после старта, а Docker его перезапускает.

Частые причины

Ошибка в конфигурации или переменных окружения, недоступная зависимость (БД, сеть), нехватка памяти (OOM), неверный образ или команда, отсутствующий файл или том.

Диагностика

docker ps -a --filter name=<имя>
docker inspect <имя> --format '{{.State.ExitCode}} {{.State.OOMKilled}} {{.RestartCount}}'
docker logs --tail 200 <имя>
docker events --since 15m --filter container=<имя>
docker stats --no-stream <имя>

Как исправить

Исправить причину по последним строкам лога перед падением. Код выхода 137 обычно означает SIGKILL (в том числе OOM), 1 — ошибку приложения. Если причина в памяти — см. DockerContainerOomKilled.

Когда можно заглушить

При отладке на тестовом стенде. На production — нет.