Optimiser le cycle de vie des pods Kubernetes avec preStop

Question

Hello, je constate que lors de chaque déploiement sur mon cluster Kubernetes, j'ai des erreurs 502 intermittentes sur mon ingress Nginx. Il semble que les pods sont supprimés avant que les connexions actives ne soient terminées. J'utilise un déploiement standard sans hook particulier.

Est-ce qu'ajouter un preStop sleep est la méthode recommandée ou existe-t-il une solution plus propre au niveau du cycle de vie des conteneurs ?

anne-begue · Answer

C'est un problème classique lié au délai de propagation de la mise à jour des endpoints dans les services. Le kube-proxy met du temps à mettre à jour les tables iptables.

genevieve-sauvage · Answer

Exactement, j'ai l'impression que le trafic continue d'être envoyé vers le pod en terminaison. Le sleep résout le souci mais ça me semble être du bricolage.

gturpin · Answer

Le sleep est en effet nécessaire. Voici le pattern standard à mettre dans ton deployment.yaml :lifecycle:
  preStop:
    exec:
      command: ["/bin/sh", "-c", "sleep 15"]

anne-begue · Answer

Attention à bien vérifier que ton terminationGracePeriodSeconds est supérieur à la valeur du sleep sinon le pod sera tué brutalement.

genevieve-sauvage · Answer

Merci pour la précision. Je vais ajuster le terminationGracePeriodSeconds à 30 secondes pour être large. C'est quand même dommage qu'il n'y ait pas de native solution plus intelligente.

gturpin · Answer

C'est une limitation du découplage entre le control plane et le data plane. Le sleep est la norme industrielle pour éviter les drops de paquets lors du rolling update.

anne-begue · Answer

Tu peux aussi vérifier tes readinessProbes, parfois un échec précoce provoque le retrait du pod avant que le signal SIGTERM ne soit reçu.

genevieve-sauvage · Answer

Je vais auditer mes probes ce soir. Merci à vous deux pour ces pistes, je pars sur le sleep + ajustement du délai de terminaison.

Optimiser le cycle de vie des pods Kubernetes avec preStop

8 commentaires

Laisser une réponse

Les boucles dans le langage de programmation Go

Tissus Réseaux Intelligents : L'Ère de l'Opération par Intention

Fluid Computing : L'Ère des Architectures Adaptatives DevOps

Rejoindre la communauté