Performances I/O catastrophiques sur une VM Linux
Commentaires
Salut ! Ca ressemble à de la saturation du stockage sous-jacent ou un souci de file system. T'as un monitoring sur ton block storage côté hyperviseur ? Est-ce que d'autres VMs sur le même hôte ont aussi des soucis ? Regarde aussi l'alignement des partitions ça peut flinguer les perf sur les gros IOs si c'est pas bon
vérifie le scheduler I/O aussi. si t'es sur un SSD c'est souvent mieux de mettre
noopdeadlinecfqcat /sys/block/sdX/queue/schedulerecho noop > /sys/block/sdX/queue/scheduler
d'acc je regarde pour le stockage sous-jacent. l'hyperviseur semble ok et les autres vms vont bien. côté alignement des partitions je crois que c'est bon c'est du lvm géré par l'installateur. par contre le scheduler i/o c'est une bonne piste je vais vérifier ça. on est sur des ssd virtuels fournis par le san
c'est aussi ptete de l'over-provisioning côté SAN ? si t'es sur un stockage partagé et qu'un voisin se met à faire plein d'IOs ça peut te pénaliser. et le cache I/O de ta VM est bien activé ? genre
writebackwritethroughnone
oui le cache est critique. si t'as le choix entre
direct syncnone
et une autre chose les versions du kernel et des drivers virtio. t'es à jour ? des fois un vieux driver peut avoir des régressions de perf. et le
discard
ok alors le scheduler était bien sur
cfqnoopwritethroughnonefstrim
c'est le jour et la nuit ! les latences sont revenues à la normale autour de 5ms. le changement de scheduler et le TRIM ont fait le taf. un grand merci à tous pour les pistes c'était une bonne galère
Laisser une réponse
Vous devez être connecté pour poster un message !
Rejoindre la communauté
Recevoir les derniers articles gratuitement en créant un compte !
S'inscrire
roger-paul
Membre depuis le 21/07/2024actif
yo la team
on a une VM Linux qui héberge une base de données (pas RDS on est sur une bête vm avec un block storage attaché) et depuis quelques jours les perf I/O sont dans les chaussettes. on parle de plusieurs centaines de ms pour des opérations disque basiques alors qu'avant c'était genre 2-3ms. ça impacte grave la latence de l'app
la VM tourne sur KVM avec un disque virtio. j'ai checké
et le est à 100% tout le temps avec un énorme. pas de proc qui bouffe le cpu non plus