Optimiser le garbage collection Go avec GOGC

Question

Hello, je constate des pics de latence réguliers sur mon microservice en Go. Après analyse avec go tool pprof, il semble que le Garbage Collector soit trop agressif, ce qui cause des pauses STW (Stop-The-World) perceptibles sous forte charge.

J'ai essayé de modifier GOGC, mais les résultats sont mitigés sur le heap. Quelqu'un a des retours d'expérience sur le tuning fin en production ?

cparis · Answer

Le problème avec GOGC seul, c'est qu'il ne prend pas en compte le rythme d'allocation. As-tu regardé du côté de GOMEMLIMIT ? C'est souvent plus efficace depuis la 1.19.

renaud-olivie · Answer

J'ai testé GOMEMLIMIT, ça aide à éviter l'OOM, mais les pauses persistent. Je cherche à réduire la fréquence des cycles.

adelaide-morvan · Answer

Si tu as beaucoup d'objets courts, essaie d'utiliser des sync.Pool pour réutiliser tes buffers. Ça réduit drastiquement la pression sur le GC.

cparis · Answer

Exact. Voici un exemple pour réutiliser des buffers :var bufferPool = sync.Pool{
  New: func() interface{} {
    return make([]byte, 1024)
  },
}

renaud-olivie · Answer

Merci pour l'exemple, je vais implémenter ça sur mes handlers HTTP. C'est une excellente piste.

anouk-deoliveira · Answer

N'oublie pas de checker les finalizers aussi, c'est souvent la cause cachée des fuites qui déclenchent le GC trop souvent.

renaud-olivie · Answer

Bonne idée, je n'avais pas pensé aux finalizers. Je vais auditer le code pour voir s'il y en a qui traînent.

cparis · Answer

Tiens-nous au courant, les metrics de runtime.MemStats devraient te confirmer la baisse de la fréquence des cycles.

adelaide-morvan · Answer

Vérifie aussi le GODEBUG=gctrace=1 pour voir exactement ce qui se passe sous le capot pendant les pics.

renaud-olivie · Answer

Je vais monitorer avec gctrace=1 demain en staging. Merci à tous pour les conseils.

Optimiser le garbage collection Go avec GOGC

10 commentaires

Laisser une réponse

Déploiement et Backup automatique d'une application Symfony 4

Gérer et manipuler les Deployments Kubernetes

Notre première infrastructure AWS depuis Terraform

Data Mesh : L'Ère des Données Distribuées et l'Impact sur le DevOps

SRE vs DevOps : Le clash des cultures qui paralyse vos déploiements

Rejoindre la communauté