schraubenkopf

Ich bin gestern endlich mal dazu gekommen, das Teil mit Ubuntu zu booten. Nach powertop --auto-tune und hdd spindown komme ich mit meinem Setup auf 20W. Unraid läuft unter diesen Umständen mit 26W (alle Docker gestoppt). Nach einigen Stunden sinkt der Bedarf auf 24W. Das sind nun immerhin deutlich weniger als die 35W, die ich eingangs gemessen habe. Ich hatte zwischenzeitlich etwas an den Einstellungen herumgepfuscht und den Energiemesser von einem Shelly Plus S Gen3 auf einen KD302 gewechselt. Und mit 26 bzw. 24W bin ich ja in etwa dort, wo ich mindestens sein möchte. Aber jetzt wo ich weiß, was Ubuntu braucht, frage ich mich schon, ob ich hier nicht noch etwas verbessern kann. 5W sind bei 24/7 ja immerhin 44kWh im Jahr. Die GTX habe ich wegen meiner llm drin. Daher war eine F-CPU ausreichend und mit rund 50€ Preisunterschied auch ziemlich attraktiv.

Danke für den Hinweis! Ja, die Karte kommt auf P8: Gegenüber dem Testaufbau (um die 20W) sind ja nur eine PCIe NVMe sowie die S-ATA-Platten dazu gekommen. Je Platte hatte ich mit 1W gerechnet. Dann wäre ich in der Größenordnung von 24-25W. Headless lief der Testaufbau sogar mit 18W. Anhand der PCIe-Belegung kann ich mir die erhöhte Leistungsaufnahme daher nicht erklären.

Moin, ich habe heute ein Hardware- und Versionsupgrade vorgenommen und festgestellt, dass ich nun eine deutlich höhere Leistungsaufnahme habe. Zuvor lief Unraid 6.12 auf einem älteren Fujitsu Server. Bei dem habe ich etwa 23W an der Dose gemessen (spindown). Ich hatte Probleme mit dem ASPM. Weil der PEG-Slot belegt wurde konnte nur C3 erreicht werden. Bleibt der PEG frei zieht das System etwa 12W aus der Dose. Im Detail: Fujitsu D3401 i7 6700 2*8GB DDR4 2*1TB WD Blue NVMe 3*18TB Toshiba S-ATA GTX 1060 bzw X710 DA2 (da nur 1 Slot verfügbar) onboard Intel NIC proprietäres Netzteil BIOS-Settings für maximale Energieeinsparung Unraid 6.12.13 powertop installiert und --auto-tune maximal C3 Die neue Hardware habe ich vor dem Umbau mit Ubuntu getestet. Festplatten waren keine angeschlossen. Ansonsten war alles so zusammengestellt wie es dem Zielzustand entspricht. Auch was das BIOS angeht (ASPM alles an, C-States an,...). Dabei habe ich um die 20W an der Dose gemessen. Ohne GPU und NIC brauche ich nur 10W. Im Detail: ASUS Z690-P D4 CSM i5-14400F 1*8GB DDR4 1*256GB NVMe GTX1060 X710-DA2 Bequiet E9-500W BIOS-Settings für maximale Energieeinsparung, interne NIC deaktiviert Ubuntu 20.04 powertop installiert und --auto-tune ASPM L1 überall verfügbar und aktiv Nun steckt alles in einem Gehäuse (neue Hardware plus die Platten aus dem alten System) und ich messe nicht weniger als 35W. Blöd war's, dass ich auch noch ein Upgrade gemacht habe. Das lag daran, dass ich mit der X710 unter Unraid 6 keine Verbindung aufbauen konnte. Erst nach dem Upgrade habe ich dann festgestellt, dass es an den Einstellungen und nicht an Unraid lag. Im Detail: ASUS Z690-P D4 CSM i5-14400F 2*8GB DDR4 2*1TB WD Blue NVMe 3*18TB Toshiba S-ATA GTX1060 @ P8 (Treiber v580.76.05) X710-DA2 @ 10Gb via DAC Bequiet E9-500W BIOS-Settings für maximale Energieeinsparung, interne NIC deaktiviert Unraid 7.1.4 powertop installiert und --auto-tune maximal C6 in powertop ASPM L1 überall verfügbar und aktiv Energiemodus auf Beste Leistung (Beste Energieeffizienz hat nix gebracht) HDMI und USB abgesteckt Bin mit meinem Latein am Ende. Hab mit all den Platten keine 20W erwartet, aber unter 25W möchte ich schon bleiben. Irgendwelche Ideen, wie ich meinem Ziel näher kommen kann? lspci root@unraid:~# lspci -vv | awk '/ASPM/{print $0}' RS= | grep --color -P '(^[a-z0-9:.]+|ASPM |Disabled;|Enabled;)' 00:01.0 PCI bridge: Intel Corporation Raptor Lake PCI Express 5.0 Graphics Port (PEG010) (rev 01) (prog-if 00 [Normal decode]) LnkCap: Port #2, Speed 8GT/s, Width x16, ASPM L0s L1, Exit Latency L0s <4us, L1 <16us LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 00:1a.0 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #25 (rev 11) (prog-if 00 [Normal decode]) LnkCap: Port #25, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 00:1b.0 PCI bridge: Intel Corporation Device 7ac0 (rev 11) (prog-if 00 [Normal decode]) LnkCap: Port #17, Speed 8GT/s, Width x1, ASPM L0s L1, Exit Latency L0s <1us, L1 <4us LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, LnkDisable- CommClk- 00:1c.0 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #1 (rev 11) (prog-if 00 [Normal decode]) LnkCap: Port #1, Speed 8GT/s, Width x1, ASPM L0s L1, Exit Latency L0s <1us, L1 <4us LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, LnkDisable- CommClk- 00:1c.2 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #3 (rev 11) (prog-if 00 [Normal decode]) LnkCap: Port #3, Speed 8GT/s, Width x1, ASPM L1, Exit Latency L1 <64us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable+ CommClk+ 00:1d.0 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #9 (rev 11) (prog-if 00 [Normal decode]) LnkCap: Port #9, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 00:1d.4 PCI bridge: Intel Corporation Alder Lake-S PCH PCI Express Root Port #13 (rev 11) (prog-if 00 [Normal decode]) LnkCap: Port #13, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <64us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 01:00.0 VGA compatible controller: NVIDIA Corporation GP106 [GeForce GTX 1060 6GB] (rev a1) (prog-if 00 [VGA controller]) LnkCap: Port #0, Speed 8GT/s, Width x16, ASPM L0s L1, Exit Latency L0s <512ns, L1 <16us LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 01:00.1 Audio device: NVIDIA Corporation GP106 High Definition Audio Controller (rev a1) LnkCap: Port #0, Speed 8GT/s, Width x16, ASPM L0s L1, Exit Latency L0s <512ns, L1 <4us LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 02:00.0 Non-Volatile memory controller: Sandisk Corp WD Blue SN580 NVMe SSD (DRAM-less) (rev 01) (prog-if 02 [NVM Express]) LnkCap: Port #0, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <8us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 06:00.0 Ethernet controller: Intel Corporation Ethernet Controller X710 for 10GbE SFP+ (rev 01) LnkCap: Port #0, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <16us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 06:00.1 Ethernet controller: Intel Corporation Ethernet Controller X710 for 10GbE SFP+ (rev 01) LnkCap: Port #0, Speed 8GT/s, Width x4, ASPM L1, Exit Latency L1 <16us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+ 08:00.0 Non-Volatile memory controller: Sandisk Corp WD Blue SN580 NVMe SSD (DRAM-less) (rev 01) (prog-if 02 [NVM Express]) LnkCap: Port #0, Speed 16GT/s, Width x4, ASPM L1, Exit Latency L1 <8us LnkCtl: ASPM L1 Enabled; RCB 64 bytes, LnkDisable- CommClk+

Nope. Danke für den Hinweis.

Hi, danke dir! Ich hab mir das ASUS Prime Z690-P D4-CSM gekauft. Mit Preisnachlass 110 Euro. Als CPU nutze ich den 14400F. Das Netzteil ist ein älteres von bequiet (E9-500). Das Board hat zwar nur 4x S-ATA, aber dann wird bei Bedarf eine ASM1166 nachgerüstet. Im idle hab ich das Board komplett nackt (ohne GPU usw) auf 10,0 W unter Ubuntu gebracht. Mit der 1060 und der X710 hab ich headless immerhin 18,4W geschafft, KVM im Desktop 20,9W. Die Realtek 2,5Gb NIC musste ich aber generell deaktivieren, weil die kein ASPM konnte und somit das System im Bereich von 30W lief. Der Test mit Unraid steht noch aus. Ich werde berichten.

Moin, ich will/muss meinen Server erneuern. Aktuell läuft das bei mir: Fujitsu D3401 mit einem i7 6700, 2x16GB DDR4 X710-DA2 2x 1TB NVMe als Cache-Pool (davon eine im Adapter) 3x 18TB SATA als Array Weil auf dem Server eine lokale LLM laufen soll, muss noch eine GTX1060 rein (vorerst, weil liegt rum). Nur passt die nicht noch mit aufs Board, da es nur 2*16x und 2*1x Slots hat. Zudem verhindert das Board für die eine der Cache-SSD im Adapter (oberster PCIe Slot) ASPM, sodass ich nur auf C3 komme. Lasse ich den obersten Slot frei komme ich auf C8. Nun soll also was neues her. Primär ist für mich die Frage im Raum, welches Board als Basis am besten/überhaupt geeignet ist. Vorweg: Allzu viel ausgeben möchte ich nicht, also Board jenseits von 200 Euro sind keine Option. Das neue Board soll haben: 1x PCIe x16 2x PCIe x4 6+ SATA 2+ m.2 2280 Hohe Effizienz (unter 15W idle nackt) Die ganzen Bxx0 Boards scheiden ja direkt mal aus, da nicht genug Lanes für die PCIe verfügbar sind. Von Fujitsu/Kontron gibt es nichts (bezahlbares/verfügbares). MSI soll Grütze sein und auf Gigabyte bin ich nicht gut zu sprechen. Klingt für mich erstmal nach einem Zxx0-Board, aber da sind ja wieder so viele unnötigen Features drauf die Strom und Geld fressen. Die Wxx0-Board sind preislich außer Reichweite. Irgend eine Idee, was für meinen Fall geeignet wäre?