promql sum by rate counter reset issue

Question

J'essaie de calculer un taux par service avec PromQL en faisant un sum by (service) (rate(my_counter_total[5m])) mais parfois j'ai des pics bizarres quand le compteur se reset

Comment on gère les resets de compteurs avec rate et sum by pour avoir des métriques lissées

petit-stephane · Answer

rate est censé gérer les resets de compteurs automatiquement en faisant une extrapolation entre le dernier point avant le reset et le premier point après. Si tu as des pics c'est peut-être la période d'échantillonnage ou d'agrégation qui est trop courte pour lisser

dpierre · Answer

Utilise irate si tu veux un taux instantané sur les deux derniers points et pas une moyenne sur la fenêtre. Ça peut être plus volatil mais ça montre les changements plus vite. Sinon augmente ta fenêtre pour rate par exemple rate(my_counter_total[10m])

isaac-morel · Answer

Parfois c'est aussi un problème de scrape interval. Si ton scrape_interval est pas aligné avec tes requêtes rate ça peut faire des trucs bizarres. Vérifie la consistance

etienne04 · Answer

Ok je vais essayer d'allonger la fenêtre du rate et regarder l'alignement des scrapes C'est sûrement un mix des deux. Merci pour les retours

promql sum by rate counter reset issue

4 commentaires

Laisser une réponse

NetworkPolicy (Firewall interne des pods kubernetes)

Event à la Dockercon Europe 2018

L'histoire du DevOps

Data Mesh : L'Ère des Données Distribuées et l'Impact sur le DevOps

Tissus Réseaux Intelligents : L'Ère de l'Opération par Intention

Rejoindre la communauté