alertes prometheus qui flappent pour la ram libre

Question

salut les sres j'ai un souci avec nos alertes prometheus sur la ram libre elles flappent tout le temps genre une minute en alerte la suivante ok même si les services tournent bien ça devient chiant à filtrer
# Exemple d'alerte
alert: HighMemoryUsage
expr: (node_memory_MemFree_bytes + node_memory_Buffers_bytes + node_memory_Cached_bytes) / node_memory_MemTotal_bytes * 100 < 10
for: 5m
labels:
  severity: warning
annotations:
  summary: "High Memory Usage on {{ $labels.instance }}"

aime-bodin · Answer

yo faut pas regarder juste MemFree sur linux c trompeur le kernel utilise le max de ram pour le cache disque et buffers tant qu'il y a de la ram dispo pour ça quand un process en a besoin il la libère direct

fboyer · Answer

ouais c'est un piège classique regarde plutôt la métrique memavailable si ton node exporter l'expose c'est plus représentatif de ce qui est réellement "libre" pour les applis

joseph79 · Answer

ah ok je comprends mieux pourquoi ça flappe alors notre alerte regarde que memfree donc dès que le cache monte ça gueule

aime-bodin · Answer

exactement remplace ton expression par node_memory_memavailable_bytes / node_memory_memtotal_bytes * 100 < 10 et tu devrais avoir des alertes plus pertinentes

joseph79 · Answer

super thx les gars je teste ça tout de suite et je vous redis si ça résout le problème

alertes prometheus qui flappent pour la ram libre

Commentaires

Laisser une réponse

Event à la Dockercon Europe 2018

InnerSource : Démultipliez l'Innovation et la Collaboration DevOps

Conclusion du cours d'initiation à GoLang

Rejoindre la communauté