Comprendre et gérer l'OOM killer Linux
Retrouver les processus tués par le noyau à cause de la mémoire, lire et régler leur score OOM, et choisir le comportement d'allocation.
Le noyau Linux tue un processus quand la mémoire est épuisée (l'OOM killer, pour out of memory). Cet article explique comment retrouver les processus tués, lire leur score et ajuster le comportement.
Retrouver les processus tués
journalctl -a | grep -i "killed process"
Par démarrage :
journalctl --list-boots | \
awk '{ print $1 }' | \
xargs -I{} journalctl --utc --no-pager -b {} -kqg 'killed process' -o verbose --output-fields=MESSAGE
Score d'un processus
cat /proc/$PID/oom_score
Le score se règle avec oom_score_adj (de -1000 à 1000). Une valeur négative rend le processus moins susceptible d'être tué ; -1000 l'en protège complètement.
echo -100 > /proc/$PID/oom_score_adj
L'ancienne interface oom_adj (de -17 à 15) est dépréciée, mais encore présente :
| Action | Commande |
|---|---|
| Lire la valeur | cat /proc/$PID/oom_adj |
| La rendre plus susceptible d'être tuée | echo 15 > /proc/$PID/oom_adj |
| La rendre moins susceptible d'être tuée | echo -15 > /proc/$PID/oom_adj |
Paramètres du noyau
sudo sysctl -a | grep oom
Le comportement de allocation mémoire se règle avec vm.overcommit_memory (dans /etc/sysctl.conf ou un fichier de /etc/sysctl.d/) :
| Valeur | Comportement |
|---|---|
| 0 | Heuristique : estime si la mémoire suffit (défaut) |
| 1 | Accepte toujours l'allocation |
| 2 | Refuse l'allocation si la mémoire ne suffit pas |
Pour choisir le processus tué lors d'une saturation, vm.oom_kill_allocating_task vaut 0 par défaut (le processus au plus gros score est tué) et 1 pour tuer le processus qui a provoqué la saturation.
Protéger un service avec systemd
Dans la section [Service] de l'unité (par exemple via systemctl edit <service>) :
[Service]
OOMScoreAdjust=-1000
Surveiller les candidats à l'OOM
dstat --top-oom
Affiche le processus le plus susceptible d'être tué.
Remarques
- La commande
rcctlde la note source est propre à OpenBSD et n'est pas reprise. - Les exemples de la note source utilisaient le nom d'hôte réel dans l'invite ; l'invite est remplacée par un nom générique.