Debuguer les erreurs 502 Bad Gateway sur Nginx Ingress

Question

J'ai des erreurs 502 Bad Gateway intermittentes sur mon Ingress Nginx quand le backend reçoit un pic de trafic. Mes logs indiquent upstream prematurely closed connection. J'ai vérifié les keepalive_timeout, mais ça ne semble pas suffire. Une idée sur la configuration des buffers ou du proxy_read_timeout ?

paulette40 · Answer

Vérifie si ton application backend ferme la connexion avant que Nginx n'ait fini de lire la réponse. Augmente proxy_buffer_size dans tes annotations.

danielle-petit · Answer

J'ai eu le même souci. Ajoute ceci dans tes annotations Ingress : nginx.ingress.kubernetes.io/proxy-read-timeout: "60"
nginx.ingress.kubernetes.io/proxy-buffer-size: "128k" Cela règle souvent les problèmes de buffer trop petits.

dcarpentier · Answer

Merci, j'ai testé avec 128k mais ça persiste. Est-ce que cela pourrait être lié au keepalive côté backend ?

virginie-joseph · Answer

Regarde si ton backend ne fait pas de graceful shutdown trop rapide. Si le pod est supprimé pendant un rolling update, Nginx peut recevoir un RST.

paulette40 · Answer

Bonne piste. Vérifie la valeur de preStop dans ton manifeste de déploiement pour laisser le temps au pod de finir ses requêtes.

dcarpentier · Answer

Effectivement, j'ai ajouté un sleep 10 dans le preStop et les 502 ont disparu lors des déploiements. C'était bien un problème de race condition lors du SIGTERM.

Debuguer les erreurs 502 Bad Gateway sur Nginx Ingress

6 commentaires

Laisser une réponse

Gérer et manipuler un Service Kubernetes

Event à la Dockercon Europe 2018

Introduction au cours complet sur Ansible

Comprendre et utiliser Packetbeat dans la stack ELK

Les variables CI/CD dans GitLab pour gérer vos secrets

Rejoindre la communauté