NodeMemoryLow: что делать при алерте

Правило алерта

alert: NodeMemoryLow
expr: node_memory_MemAvailable_bytes / node_memory_MemTotal_bytes * 100 < 10
for: 10m
severity: warning

Сообщение алерта: Мало доступной памяти ({{ $labels.instance }})

Что значит

Доступно менее 10% оперативной памяти (по MemAvailable, то есть с учётом кэша, который ядро может отдать). Система ещё работает, но запас мал.

Частые причины

Утечка памяти в приложении, слишком много воркеров, рост кэша приложений (Redis, JVM), запуск тяжёлой задачи.

Диагностика

free -h
ps aux --sort=-%mem | head -n 10
smem -tk 2>/dev/null | tail -n 15      # если установлен smem
docker stats --no-stream               # если есть Docker
dmesg -T | grep -i -E 'oom|killed process' | tail

Как исправить

Найти процесс-потребитель, перезапустить при утечке, уменьшить число воркеров/размер кэша, добавить RAM. Для JVM проверьте -Xmx.

Когда можно заглушить

На серверах, где память намеренно занята под кэш (базы данных с большим shared_buffers и т.п.), но тогда лучше поднять порог в правиле под ваш профиль.