prometheus utilisation cpu elevee trop de metrics

Question

mon serveur prometheus a le cpu qui monte en flèche quand je mets en prod de nouvelles apps avec plein de metrics

kpotier · Answer

c'est la haute cardinalité des labels. trop de valeurs uniques pour un meme label ça explose la mémoire et le cpu

dominique-delahaye · Answer

faut faire du relabeling pour dropper les labels inutiles ou les normaliser. dans la config prometheus.yml
- source_labels: [__name__]
  regex: '(.*_session_id|.*_request_id)'
  action: drop

claire-dossantos · Answer

ouais des fois les devs mettent des IDs uniques dans les labels ce qui est un no-go total

alex20 · Answer

pense aussi a ta rétention. trop long pour trop de metrics ça charge le disque et les requêtes

etienne21 · Answer

ah oui y'avait un service avec des user_id dans les labels. je vais mettre en place le relabeling merci

prometheus utilisation cpu elevee trop de metrics

5 commentaires

Laisser une réponse

Gestion des erreurs dans le langage de programmation Go

Déployer et gérer vos hôtes docker avec Docker Machine

Ce que n'est pas le DevOps

AF_XDP : L'Anatomie du Networking Zero-Copy

Sécurisez vos déploiements : Ne laissez plus vos clés API dans le state

Rejoindre la communauté