undone

@Kilrah you are the best, thanks! It looks like one orphan image took up that much space. Based purely on the loading time during the removal process, I would attribute it to “netdata” (image ID 75e3630d0e1ad - I typed it out because Unraid wasn't responding for about 5 minutes). Unraid now shows 277 GB in use for the cache & ncdu shows the following: ncdu /mnt/cache 192 GiB /system 96 GiB /domains 96 GiB /appdata ...In /system the biggest folder after the btrfs-loop is just 4.4 GiB, pointing to /var and /tmp Does anyone can explain what cause that huge files with "netdata"? Or is there some way to check what has caused it? The answer from @Kilrah will be marked as solution, afterwards.

@MowMdown what part of the diagnostics is needed? - I'd like to share as few files as possible, since some personal information is still visible despite anonymization.

Hello guys, I am running my Unraid server for several years and currently using version 7.3.2. Since I thought about switching to internal boot, I tried to understand why my Cache drive is at nearly 700 GB of 1 TB for the last years and how to lower the numbers. All my media, except of Nextcloud, is located in the array-pool. First I checked the shares and found some old / not used docker I removed. It endet at around 622 GB. After checking AI-search what else I can look into, I installed ncdu (NCurses Disk Usage) to have a better overview of the folders, It showed to following: ncdu /mnt/cache 1.9 TiB /system → /system/docker/installed/btrfs/subvolumes/... *several folders, 5x 356 GiB, ?x 4 GiB and lower* 96 GiB /domains (VM) 95 GiB /appdata (Docker) 12 GiB /isos x GiB other stuff Except for /system I think I understood the folders and files behind it. But with /system I have absolutely no idea. What adds to the confusion is when I dig deeper into the large folders and look for causes. Big system-folder, all five of them: ~36 GiB /domains = /Windows 11; /Mint ... I had VM with that names a year ago, currently no Mint-VM and just another Windows 11-VM with a totally differnet name ~50 GiB /appdata = ~98% /Plex-Media-Server/[...] ~46% /Metadata ~21% /Plug-in Support/Databases ~17% /Media/localhost ~13% /Cache/PhotoTranscoder ~270 GiB /system = /docker/installed/btrfs/subvolumes/ → another two big folders, separated 50/50 [...] ~50% /domains = again /Windows 11; /Mint ~38% /appdata = again primarily PMS ~12% /system = "docker...btrfs" loop All of the big folders in /system look similar, all have the btrfs-loop with the same old VM-names in /domains sub-folders and PMS in /appdata sub-folders I can still convince myself that the total of about 2.1 TiB makes sense with RAID 1, but I don't really understand why it's showing me double the capacity (since the RAID 1 is supposed to mirror the data, there should only be 1 TB available). Some more details of the cache-pool, with btrfs filesystem usage (after manual balance last night): Overall: Device size: 1.82TiB Device allocated: 1.14TiB Device unallocated: 696.93GiB Device missing: 0.00B Device slack: 0.00B Used: 1.13TiB Free (estimated): 352.62GiB (min: 352.62GiB) Free (statfs, df): 352.62GiB Data ratio: 2.00 Metadata ratio: 2.00 Global reserve: 512.00MiB (used: 0.00B) Multiple profiles: no Data Metadata System Id Path RAID1 RAID1 RAID1 Unallocated Total Slack -- --------- --------- -------- --------- ----------- --------- ----- 3 /dev/dm-4 577.00GiB 6.00GiB 32.00MiB 348.46GiB 931.50GiB - 4 /dev/dm-5 577.00GiB 6.00GiB 32.00MiB 348.46GiB 931.50GiB - -- --------- --------- -------- --------- ----------- --------- ----- Total 577.00GiB 6.00GiB 32.00MiB 696.93GiB 1.82TiB 0.00B Used 572.85GiB 5.15GiB 112.00KiB The shares are as follows: appdata = Cache backup = Cache data = Cache_hdd → array ... *different cache drive only for caching data before it is added to the array* domains = Cache isos = Cache local = Cache nextcloud_Backup = Cache_hdd → array nextcloud_Data = Cache system = CacheThe AI also suggested that I run a “docker prune” command and perform a “docker reset.” But since I'd probably end up causing more problems than freeing up storage space, I wanted to ask for your advice and suggestions first. So if you can explain why /system is so bloated, why I'm still finding old VM data in there, and how I can finally remove ‘everything’ that's unused, both I and my wallet would be very grateful to you. Thanks in advance to everyone who's helping out.

Just wanted to report back that it worked, even if the encryption caused self-created problems ... Just read the windows that appear carefully and don't enter an extra password, not even the same as the array, because the system can't manage that at all .

Well, that was quick, thank you. I'll try it at the weekend.

Hi guys, I just got a good deal for new pool and cache drives and would now like to swap my current ones for the new ones. First of all, I have found the FAQ, but I would like to make sure and have additional questions. My current setup: Pool of two devices, encrypted, RAID1, 1TB each SSD → Docker etc. Cache of one device, encrypted, 1TB SSD → Cache for the array disks New SSD: for the pool, two 1TB SSD for the cache, one 2TB SSD Questions: If I have understood it correctly, for the pool i will remove one old SSD, replace it with a new SSD and go through the procedure of the linked FAQ. After that I do the same with the second old SSD and replace it with the second new SSD. - Is that it, or is there anything else to consider, also in terms of encryption? For the cache drive I would move all files to the array, remove the old drive and add the new drive, with the same name and if necessary allocate all array disks to the new cache. - Will that work? Is there a better way? Is there anything else to consider for the procedure that I haven't noted?

Komme wohl erst morgen früh dazu es zu testen, schaue mir dann das BIOS, suche nach dem ASPM und vergleiche es auch noch mit diesem Thread: Wenn das nichts bringt entferne ich die SSDs wie von dir beschrieben und lasse powertop laufen: Seagate > Corsair > Samsung Danke schonmal soweit. EDIT für @MPC561: Die BIOS-Optimierung (ASPM einschalten + Einstellungen des oberen Links übernehmen) hat alleine nichts gebracht, nach 1h wurden trotz Spindown immer noch C3 angezeigt. Das Aufbauen der ersten SSD (Seagate IronWolf 510) hat wiederum den Erfolg gebracht, C8 nach "auto-tune" in PowerTop (PowerTop komplett: https://pastebin.com/m7ji4JEU) lspci sieht wie folgt aus: Da ich keine vergleichbare SSD rumliegen habe kann ich diese nicht tauschen um das Array zu starten, ich werde mir demnach eine neue zulegen müssen. Gibt es für die M.2 PCIe SSDs generell Hersteller oder Angaben auf welche man für den Server, bzw. C-State, achten sollte? Oder einfach bei Geizhals die günstigste TLC mit DRAM-Cache nehmen?

Auto-Tune ist durchgeführt, die HDDs gehen in den spindown und wachen auch wieder auf wenn eine Datei benötigt wird, eingespart werden dabei ~30W. Der C-State hat sich nach der Zeit nicht geändert, immer noch C3, daher der Befehl: lspci -vv | awk '/ASPM/{print $0}' RS= | grep --color -P '(^[a-z0-9:.]+|ASPM |Disabled;|Enabled;)' Ausgabe: Wenn ich es korrekt verstanden habe, wäre der nächste Schritt die Hardware zu suchen, welche den C-State bei C3 hält - am besten mit einer gesonderten Platte mit Ubuntu etc. und die restliche Hardware nach und nach hinzufügen und PowerTop laufen lassen. Gibt es hier was zu beachten um die Hardware anschließend wieder mit Unraid zu nutzen, bzw. einen besseren Weg?

Ausgeführt habe ich bei Powertop noch nichts, daher die Frage zu beginn. Im BIOS habe ich hauptsächlich C10 gewählt und ErP etc. aktiviert, muss ich aber nochmal drüberschauen. Ist sie nicht, es ist eine SSD als HDD Cache, damit alle neuen Dateien erst auf die SSD geschrieben und dann einmal am Tag auf die HDDs im Array geschoben werden. lspci -vvv | grep "ASPM": lspci -vvv | grep "ASPM" LnkCap: Port #5, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <16us ClockPM- Surprise- LLActRep+ BwNot+ ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ LnkCap: Port #25, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <64us ClockPM- Surprise- LLActRep+ BwNot+ ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ LnkCap: Port #1, Speed 8GT/s, Width x1, ASPM L0s L1, Exit Latency L0s <1us, L1 <4us ClockPM- Surprise- LLActRep+ BwNot+ ASPMOptComp+ LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, Disabled- CommClk- LnkCap: Port #3, Speed 8GT/s, Width x1, ASPM L1, Exit Latency L1 <64us ClockPM- Surprise- LLActRep+ BwNot+ ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ LnkCap: Port #9, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us ClockPM- Surprise- LLActRep+ BwNot+ ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ LnkCap: Port #0, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us ClockPM- Surprise- LLActRep- BwNot- ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1+ ASPM_L1.2+ ASPM_L1.1+ L1_PM_Substates+ L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1- LnkCap: Port #0, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <64us ClockPM+ Surprise- LLActRep- BwNot- ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1+ ASPM_L1.2+ ASPM_L1.1+ L1_PM_Substates+ L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1- LnkCap: Port #0, Speed 5GT/s, Width x1, ASPM L1, Exit Latency L1 <4us ClockPM- Surprise- LLActRep- BwNot- ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ L1SubCap: PCI-PM_L1.2- PCI-PM_L1.1+ ASPM_L1.2- ASPM_L1.1+ L1_PM_Substates+ L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1- LnkCap: Port #1, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us ClockPM- Surprise- LLActRep- BwNot- ASPMOptComp+ LnkCtl: ASPM L1 Enabled; RCB 64 bytes, Disabled- CommClk+ L1SubCap: PCI-PM_L1.2+ PCI-PM_L1.1+ ASPM_L1.2+ ASPM_L1.1+ L1_PM_Substates+ L1SubCtl1: PCI-PM_L1.2- PCI-PM_L1.1- ASPM_L1.2- ASPM_L1.1- lspci -v: https://pastebin.com/B7bS81a6 PowerTOP komplett: https://pastebin.com/jMRNwPRz Die HDD sind wie folgt verteilt:

Hallo zusammen, bevor ich via Powertop für den Boot-Stick und die SATA-Festplatten etwas verschlimmbessere, wollte ich fragen ob ihr mir bei dem passenden command weiterhelfen könnt? Bzw. sagen könnt was ich wie anpassen muss. Powertop Screenshots habe ich angehängt. Hardware: - Intel i5 12500 - MSI PRO Z690-A DDR4 (neustes BIOS, C10 State eingestellt) + 4x 16GB RAM - HDD 4x 18TB; 1x 8TB - alle direkt am MB via SATA - SSD 2x 960GB RAID1; 1x 1TB HDD-Cache - alle direkt auf dem MB via M2 - Lüfter nach Temp. geregelt 4x 120mm (20-50%); 2x 80mm (0-50%) Verbrauch: - ca. 90W "Idle", alle Docker gestartet ohne Aktivität, VM gestoppt, HDD und SSD bei ~0%, CPU bei ~5% (<20W hatte es nach der ersten Einrichtung ohne laufende Docker und ohne HDD)

Hi guys, I just tried to create a virtual machine running Windows 11 for some offline testing e.g. of different software, but I had to chose a network source while creating it. Is it somehow possible to not give the VM any network connection? (like with Virtual Box where I just remove the network card) Or is a local connection necessary to connect via VNC? - If so, please let me know if it is possible just in my own network? To transfer files, I would like to copy and past it over VNC, or to allocate a dedicated storage with access for the VM and my PC.

mach natürlich sinn Werde das mal in einer ruhigen Minute testen, danke dir. EDIT Es hat wie bei der Lösung beschrieben funktioniert, selbst tausende Dateien waren so binnen weniger Sekunden umbenannt. Danke nochmal.

Genau, die Daten sind auf drei HDDs verstreut samt einer Parity. Gibt es dazu eine gute Anleitung für Anfänger? Auch wenn die Daten verstreut liegen, könnte ich doch einfach zum Beispiel disk1/media/ zu disk1/data/media/ "verschieben"? Gibt es hinsichtlich der Partiy was zu beachten? Das war mir bekannt. Hatte ja gehofft das Linux so schlau ist und einfach das Verzeichnis der Datei anpassen kann. _______________ Ich habe mir das gerade nochmal genauer angeschaut, die Daten sind wie folgt verteilt: /mnt/disk1/media/ /mnt/disk2/media/ /mnt/disk3/media/ Ich würde also auf allen Disks folgende Verzeichnisse erstellen: /mnt/disk1/data/media/ /mnt/disk2/data/media/ /mnt/disk3/data/media/ Wenn ich nun über das webterminal den mv Befehl ausführe sollte das instant klappen (Alle Docker die darauf zugreifen beendet)? mv /mnt/disk1/media/ /mnt/disk1/data/media/

Hallo, ich habe eine große Menge an Dateien in einem Pfad (1) liegen, welche auf ein anderes Pfad (2) verschieben möchte. Mit dem "move" command dauert das bis zu zwei Wochen, weshalb ich nach einer schnelleren Lösung suche. Die Daten welche liegen aktuell hier (1): /mnt/user/media/... verschoben werden sollen die Daten hier her (2): /mnt/user/data/media/... In den "Shares" sind beide Verzeichnisse ohne Cache eingestellt, dieser hätte ca 500GB zur Verfügung. Beim RAM könnte ich gute 32GB zur Verfügung stellen, sollte das etwas helfen. Mit dem "Dynamix File Manager" habe ich in den Shares den zu verschiebenden Ordner ausgewählt und via move angefangen die Daten zu verschieben. Anfänglich erreichten die Platten Geschwindigkeiten von >200MB/s, doch zeigte sich nach wenigen Minuten schon das es auch mal bis in den KB/s Bereich abrutschen kann, was die anfänglichen ~8h um ein vielfaches erhöht. Es würde mich freuen wenn jemand einen Tipp hat wodurch ich die Dauer verringern kann.

@mgutt Danke dir für die Erläuterung. Das System läuft jetzt seit 3 Tagen wie anfangs gewünscht, mit Plex gab es durch das Kopieren von mir etwas Probleme, welche aber wieder gelöst sind.