LLI Wiki — My Digital Knowledge Base

Comprendre et gérer l'OOM killer Linux

Retrouver les processus tués par le noyau à cause de la mémoire, lire et régler leur score OOM, et choisir le comportement d'allocation.

Le noyau Linux tue un processus quand la mémoire est épuisée (l'OOM killer, pour out of memory). Cet article explique comment retrouver les processus tués, lire leur score et ajuster le comportement.

Retrouver les processus tués

journalctl -a | grep -i "killed process"

Par démarrage :

journalctl --list-boots | \
  awk '{ print $1 }' | \
  xargs -I{} journalctl --utc --no-pager -b {} -kqg 'killed process' -o verbose --output-fields=MESSAGE

Score d'un processus

cat /proc/$PID/oom_score

Le score se règle avec oom_score_adj (de -1000 à 1000). Une valeur négative rend le processus moins susceptible d'être tué ; -1000 l'en protège complètement.

echo -100 > /proc/$PID/oom_score_adj

L'ancienne interface oom_adj (de -17 à 15) est dépréciée, mais encore présente :

Action Commande
Lire la valeur cat /proc/$PID/oom_adj
La rendre plus susceptible d'être tuée echo 15 > /proc/$PID/oom_adj
La rendre moins susceptible d'être tuée echo -15 > /proc/$PID/oom_adj

Paramètres du noyau

sudo sysctl -a | grep oom

Le comportement de allocation mémoire se règle avec vm.overcommit_memory (dans /etc/sysctl.conf ou un fichier de /etc/sysctl.d/) :

Valeur Comportement
0 Heuristique : estime si la mémoire suffit (défaut)
1 Accepte toujours l'allocation
2 Refuse l'allocation si la mémoire ne suffit pas

Pour choisir le processus tué lors d'une saturation, vm.oom_kill_allocating_task vaut 0 par défaut (le processus au plus gros score est tué) et 1 pour tuer le processus qui a provoqué la saturation.

Protéger un service avec systemd

Dans la section [Service] de l'unité (par exemple via systemctl edit <service>) :

[Service]
OOMScoreAdjust=-1000

Surveiller les candidats à l'OOM

dstat --top-oom

Affiche le processus le plus susceptible d'être tué.

Remarques

Mastodon LLIMastodon SocialFosstodon