erreur prometheus context deadline exceeded sur certains targets

Question

J'ai plusieurs targets dans Prometheus qui passent en Down avec l'erreur context deadline exceeded. Pourtant quand je curl l'endpoint manuellement ça répond vite.
Pourquoi Prometheus coupe la connexion ?

marechal-clemence · Answer

C'est souvent que ton scrape_timeout est plus court que le temps de réponse réel de ton application quand elle génère des milliers de métriques. Vérifie ta config globale ou celle du job.
scrape_timeout: 10s

louis43 · Answer

Teste le temps de réponse total avec un curl qui mesure le temps de transfert, car Prometheus doit télécharger tout le payload avant le timeout.
time curl -s http://ton-app:8080/metrics > /dev/null

menard-eric · Answer

Ah oui, le time curl m'indique 12 secondes de transfert... J'ai trop de métriques de cardinalité haute sur ce service. J'ai monté le timeout à 15s et c'est stable. Top !

erreur prometheus context deadline exceeded sur certains targets

3 commentaires

Laisser une réponse

Explication pas à pas du programme GO hello world

Utilisation de la stack ELK sur les logs Apache

Les Pages Wiki sur GitLab pour centraliser votre documentation

FinOps & GreenOps : La Dualité Gagnante du Cloud Durable

Tuto : Pilotez votre Flotte IoT avec GitOps et ArgoCD

Rejoindre la communauté

Oops! An Error Occurred

The server returned a "500 Internal Server Error".