Oracle sous Linux : huge pages, max_map_count et paramètres de mémoire (ORA-04030)
Paramètres Linux et Oracle (huge pages, vm.max_map_count, _realfree_heap_pagesize, PGA) et procédure d'application pour un serveur Oracle gourmand en mémoire.
Sur un serveur Oracle sous Linux qui consomme beaucoup de mémoire (erreurs de type ORA-04030, out of process memory), trois leviers sont à examiner : les huge pages, vm.max_map_count et le swappiness. Ce mémo regroupe les paramètres Linux et Oracle utilisés et la procédure d'application.
Références : Configuring Huge Pages for Oracle on Linux (oracle-base), Change default hugepage size (golinuxcloud), Bulk collect and memory limits (performatune), SUSE KB 000016692.
Vérifier l'état actuel
# limites de l'utilisateur (courantes et "hard")
ulimit -a
ulimit -Ha
# huge pages
grep Huge /proc/meminfo
# max_map_count
more /proc/sys/vm/max_map_count
vm.max_map_count
Le paramètre noyau vm.max_map_count limite le nombre de zones mémoire (maps) qu'un processus peut posséder. Il se définit dans /etc/sysctl.conf :
# valeur persistante : ajouter la ligne dans /etc/sysctl.conf
vm.max_map_count=200000
# appliquer le fichier
sysctl -p
# appliquer immédiatement sans redémarrer
sysctl -w vm.max_map_count=200000
Règle de calcul de la note
La note retient 1 map = 64 octets, d'où :
- RAM vers maps :
RAM(Go) * 1024 * 1024 / 64 - maps vers RAM :
max_map_count * 64 / 1024 / 1024(en Go)
| RAM (Go) | max_map_count |
|---|---|
| 4 | 65536 |
| 8 | 131072 |
| 16 | 262144 |
| 20 | 327680 |
| 24 | 393216 |
| 32 | 524288 |
| 40 | 655360 |
| 48 | 786432 |
Paramètres Oracle cachés
Les paramètres _realfree_heap_pagesize_hint, _realfree_heap_pagesize et _use_realfree_heap sont des paramètres non documentés : à ne modifier que sur recommandation du support Oracle. Exemples de syntaxe :
ALTER SYSTEM SET "_realfree_heap_pagesize_hint"=524288 SCOPE=SPFILE;
ALTER SYSTEM SET "_realfree_heap_pagesize_hint"=262144 SCOPE=SPFILE SID='*';
ALTER SYSTEM SET "_realfree_heap_pagesize_hint"=262144 SCOPE=SPFILE SID='ORCL';
Lire la valeur d'un paramètre caché (connecté en SYSDBA) :
SELECT par.ksppinm name, val.ksppstvl value, par.ksppity type, val.ksppstdf is_default,
DECODE(BITAND(par.ksppiflg/256,1), 1, 'True', 'False') is_session_modifiable,
DECODE(BITAND(par.ksppiflg/65536,3), 1, 'Immediate', 2, 'Deferred', 3, 'Immediate', 'False') is_system_modifiable,
par.ksppdesc description
FROM x$ksppi par, x$ksppsv val
WHERE par.indx = val.indx
AND par.ksppinm = '_realfree_heap_pagesize';
-- idem avec '_use_realfree_heap'
Valeurs recommandées (exemple d'un serveur à forte mémoire)
| Niveau | Paramètre | Valeur |
|---|---|---|
| Linux | vm.nr_hugepages |
16388 |
| Linux | vm.max_map_count |
524288 |
| Oracle | _realfree_heap_pagesize |
524288 |
| Oracle | _use_realfree_heap |
TRUE |
| Oracle | pga_aggregate_target |
6G |
| Oracle | pga_aggregate_limit |
14G |
Ces valeurs dépendent de la mémoire du serveur : à recalculer pour chaque machine.
Procédure d'application
-
Arrêter la base et le serveur, prendre un snapshot de la machine virtuelle, redémarrer.
-
Vérifier
max_map_count, puis ajouter dans/etc/sysctl.conf(ensudo) :vm.max_map_count=524288 vm.nr_hugepages=16388Option sans redémarrage :
sysctl -w vm.max_map_count=524288etsysctl -w vm.nr_hugepages=16388. Les huge pages se réservent plus sûrement au démarrage ; redémarrer ensuite. -
Après le redémarrage, contrôler et noter
/proc/sys/vm/max_map_countet/proc/sys/vm/nr_hugepages. -
Sauvegarder le pfile et le spfile (
. oraenv, puiscd $ORACLE_HOME/dbset copier les fichiers avec un suffixe de date). -
Modifier la mémoire :
alter system set pga_aggregate_limit=14G scope=spfile; alter system set pga_aggregate_target=6G scope=spfile; -
Relever les valeurs actuelles de
_realfree_heap_pagesizeet_use_realfree_heapavec la requête ci-dessus. -
Générer un pfile de travail, arrêter l'instance, l'éditer :
create pfile='$ORACLE_HOME/dbs/work_pfile.ora' from spfile; shutdown immediateAjouter la ligne
_realfree_heap_pagesize=524288et, si_use_realfree_heapvaut FALSE, la ligne_use_realfree_heap=TRUE. -
Tester le démarrage avec ce pfile et revérifier les deux paramètres :
startup pfile='$ORACLE_HOME/dbs/work_pfile.ora'; -
Si tout est correct, recréer le spfile à partir du pfile, redémarrer normalement et revérifier :
create spfile from pfile='$ORACLE_HOME/dbs/work_pfile.ora'; shutdown immediate startup
Remarques
- Les paramètres cachés (underscore) ne sont pas supportés sans accord d'Oracle : valider avec le support avant la production.
- Une valeur de
vm.max_map_counttrop faible est un effet de bord connu de l'usage de grandes quantités de mémoire par les processus.