Optimiser le garbage collection Go avec GOGC

Question

Hello, je constate des pics de latence réguliers sur mon microservice en Go. Après analyse avec go tool pprof, il semble que le Garbage Collector soit trop agressif, ce qui cause des pauses STW (Stop-The-World) perceptibles sous forte charge.

J'ai essayé de modifier GOGC, mais les résultats sont mitigés sur le heap. Quelqu'un a des retours d'expérience sur le tuning fin en production ?

cparis · Answer

Le problème avec GOGC seul, c'est qu'il ne prend pas en compte le rythme d'allocation. As-tu regardé du côté de GOMEMLIMIT ? C'est souvent plus efficace depuis la 1.19.

renaud-olivie · Answer

J'ai testé GOMEMLIMIT, ça aide à éviter l'OOM, mais les pauses persistent. Je cherche à réduire la fréquence des cycles.

adelaide-morvan · Answer

Si tu as beaucoup d'objets courts, essaie d'utiliser des sync.Pool pour réutiliser tes buffers. Ça réduit drastiquement la pression sur le GC.

cparis · Answer

Exact. Voici un exemple pour réutiliser des buffers :var bufferPool = sync.Pool{
  New: func() interface{} {
    return make([]byte, 1024)
  },
}

renaud-olivie · Answer

Merci pour l'exemple, je vais implémenter ça sur mes handlers HTTP. C'est une excellente piste.

anouk-deoliveira · Answer

N'oublie pas de checker les finalizers aussi, c'est souvent la cause cachée des fuites qui déclenchent le GC trop souvent.

renaud-olivie · Answer

Bonne idée, je n'avais pas pensé aux finalizers. Je vais auditer le code pour voir s'il y en a qui traînent.

cparis · Answer

Tiens-nous au courant, les metrics de runtime.MemStats devraient te confirmer la baisse de la fréquence des cycles.

adelaide-morvan · Answer

Vérifie aussi le GODEBUG=gctrace=1 pour voir exactement ce qui se passe sous le capot pendant les pics.

renaud-olivie · Answer

Je vais monitorer avec gctrace=1 demain en staging. Merci à tous pour les conseils.

Optimiser le garbage collection Go avec GOGC

10 commentaires

Laisser une réponse

Introduction du cours pour apprendre le langage programmation GO

Gérer et manipuler les Pods Kubernetes

Création d'un playbook multi distributions

La Révolution des Architectures Cognitives : Vers des Systèmes DevOps Auto-Adaptatifs et Intelligents

Déployer des pipelines CI/CD programmables avec Dagger et CUE

Rejoindre la communauté