Help ! VM & Docker ne fonctionnent plus

[EricW]

Bonjour à tous,

 

Depuis un plus d'un an le serveur Unraid fonctionnait à merveille.

La sermaine dernière je monte la mise à jour 6.10.1.

j'ai constaté cette semaine que les processeurs montés serieusement en charge.

Dans la recherche de la cause, j'ai identifier que une des VM l'espace alloué était full => VM bloqué et inaccésible.

J'ai donc forcé l'arrêt de cette VM, pour autant la charge sur les processeurs était toujours présente.

J'ai donc redémarre le serveur, au redémarrage de celui-ci, 2 disques avaient disparus dans la grappe.

Sans panique, je coupe la machine jusqu'a l'arrêt complet, et redémarrage la grappe était compléte.

Par contre les VM ont totalement disparues ainsi que les dockers

 

J'ai essayé de réinstaller une VM, la configue de la machine n'est visible

 

 

Dans les réglages des VM, il n ' a plus de version  QEMU 

 

 

Sur docker, c'est le même constat, plus de conteneure, si on essaie d'ajouter un nouveau conteneure, par la liste déroulante, on retroure par la liste deroulante ce qui avait été installé.. mais aucun conteneure ne fonctionne.

Et il y a 4 coeurs bien en charge ( ça c'est nouveau)

 

 

SI quelqu'un à la solution à mon problème, je suis preneur!

 

Dans d'avance merci

 

HP Prolian  GL 380 ( d'occasion)

Intel Xeon CPU E5-2440 0 @ 2.40GHz X 2

RAM 64 GO

Disques :

Parité

• 1 To x 1

Array

• 2 To x 5
• 1 To x 6

Pool

• 300 GO  ( 2 disques en raid)

 

4 VM + 8 docker

 

 

 

Daig.txt

[ChatNoir]

Salut et bienvenue sur le forum.

 

Difficile de dire sans le diagnostics mais avec ta description, je me demande si tu ne serais pas victime du bug dans un driver qui apparait sur pas mal de serveurs HP quand VT-d est activé.

Pas de solution pour Limetech, mais ils décrivent ce qu'ils soupsonnent et le workaround qu'ils ont développé dans la 6.10.2

 

 

J'espère que ce n'est pas le cas, mais je t'invite à rapidement vérifier et mettre en place le mesures de sauvegarde si c'est le cas.

 

Après, la version de QEMU qui n'apparait pas, je ne l'ai pas entendu encore, mais je suis ce sujet d'assez loin.  

 

[ChatNoir]

Oups, pas de quote et pas abonné au thread, alors je te tag @EricW.  

[EricW]

Hello ChatNoir,

Sans croire que mon soucis aller intéresser quelqu'un => Merci pour ce retour!!

J'ai oublié de préciser que je suis comme certainement comme beaucoup de monde un simple passionné, où toutes ma connaissance vient de la lecture d’expériences au travers de forum & de tuto « youtube ».

Depuis je suis devenu un spécialise du "copier / coller", et des tuto de « Superboki ».

Je suis allé dans la section du serveur Unraid Outil / Diagnostics (pour moi c’est l’hébreux  😞 )

 

Le diag est accompagné..

 

Je viens aussi de découvrir cela :

 

 

 

Driver VT-d => ci-dessous l'état de la config

 

C'est grave Docteur?

 

Bonne journée ( Sans oublier de dire bonne Fête à toutes les Maman.)

 

EricW

 

 

tower-diagnostics-20220529-1109.zip

Edited May 29, 2022 by EricW

[EricW]

J'ajoute à la liste des déboires... Le cache de se vide pas..

Au clique sur le bouton "mover" rien ne se passe...

 

 

Edited May 29, 2022 by EricW

[JorgeB]

Pool is complete full and those errors are because it's running out of space, reboot to clear the read only status and you should be able to move some data elsewhere.

[EricW]

Hello JorgeB i’ve already reboot multiple Times and nothing change… 

sorry for my english i don’t subdue the shakespeare’s language lol  

[JorgeB]

Taking a more careful look the problem is that you started a balance, and since it wasn't able to finish because of the no space issue it's resuming after rebooting:

 

May 28 09:49:37 Tower kernel: BTRFS info (device sdo1): balance: resume -dusage=90 -musage=90 -susage=90

 

You can try this:

-stop the array

-on the console/terminal type:
 

mkdir /x
mount -o skip_balance /dev/sdo1 /x

 

Should take a few seconds to mount, once you get the cursor back type:

btrfs balance cancel /x
umount /x

 

If the above commands complete normally start the array normally and post new diags.

[EricW]

action que j'ai déja executé, j'ai une succession d'erreur.

 

 

action que j'ai déja executé, j'ai une succession d'erreur.
 le diag est accompagnée

Thank you again for your support

 

tower-diagnostics-20220529-1442.zip

[JorgeB]

Array is not stopping, make sure nothing is using it, you might need to force a reboot, in that case make sure array autostart is disabled, and then try the commands again.

[EricW]

Hello JorgeB,

 

Effectivement, j'ai passé l'array en manuel, et redémarré pour que cela fonctionne!

le pool donne l'impression de commencer à se vider, depuis hier soir l'espace libre à augmenté de 1 GO => normal ou pas normal?

 

Le Diag est accompagné.

 

Il y a en plus quelque chose de curieux qui c'est produit => tous les dockers & VM sont de nouveaux visibles comme pas magie! Very good.

 

Le docker Nginx Proxy Manager lançait énormément de messages d'erreur => j'ai supprimé & réinstallé => ca fonctionne! Doubly good

 

Il reste toujour un problème sur la VM Ubuntu (celle qui a saturé le processeur) avec la carte réseau => "network is unreachable"

J'ai essayé de modifer l'adresse MAC, j'ai tenté de modifier Network source, j'ajouté une carte supplémentaire => toujour le meme problème .."network is unreachable"

 

Dans les log de "LIBVIRT" j'ai les message suivant :

 

D'avance merci pour un retour

 

Cdt

EricW

tower-diagnostics-20220531-1242.zip

[JorgeB]

First thing to do is to free up some space on the pool, it's still almost full and can go read only again.

[EricW]

Yes ok

mais je fais comment je supprime directement les dossiers contenues dans le pool?

[JorgeB]

Just move them to the array or another place you can use for example the Dynamix File manager, the mover, or your favorite utility.

[EricW]

j'ai installé le plugin Dynamix File Manager, et a l'aide de celui-ci , j'ai déplacé le dossier des VM vers le disque 4, le pool est passé à 28% de charge: super!

On  avance bien !

 

l'ai toujours un lot d'erreurs sur le LIBVIRT, et la VM Ubuntu démarre mais ne communique pas sur le LAN, j'ai tenté toutes les config sur la carte reseau & un redemarrage du serveur Unraid, sans succé.

J'ai installé une nouvelle VM Ubuntu pour faire un test, elle fonctionne uniquement sur la source "virbr0"  & réseau "virtio-net" , mais ce n'est pas la solution pour moi

j'ai aussi essayé d'arrêter et redemarrer le service LIBVIRT sans succé.

 

(pour information : les VM window fonctionnent parfaitement)

 

C'est le seul incident encore présent, Il y a t-il une solution ?

d'avance merci 

Cordialement

EricW

 

[JorgeB]

Reboot to clear the logs and post new diags after array and VMs start.

[EricW]

Ok Bonjour Jorge B!

J'ai redémarré le serveur, l'array est fraichement démarré et la VM critique aussi.

 

Le diag est accomagné!

 

D'avance merci pour les conseils

 

EricW

tower-diagnostics-20220601-2005.zip

[JorgeB]

Pool looks OK now, and syslog is normal, as for the VM it's not my specialty and can't really help with that, I would suggest making a new post in the KVM section.

[EricW]

Ok merci je poste la section KVM