h0schi

Du siehst den Boot-Vorgang nicht, da es in der Kombi keine grafische Ausgabe gibt. BIOS-Boot muss auf Legacy gestellt sein. Mach einfach ein Ping auf die Management Netzwerk-Schnittstelle und dann siehst du, dass die XG bzw. das Webinterface erreichbar ist.

Habe zwei im Einsatz. Der erste ist eine Firewall und auf dem zweiten läuft Proxmox.

Der Eigenverbrauch ist an sich nicht das Problem. Die Mellanox-Karten berherrschen garkein ASPM, worauf die CPU meist dran gehindert wird tiefere C-States / Schlafzustände zu erreichen.

Alles unter 30w ist erlaubt Bei dem Test mit der 10G-Karte ist Sophos als OS im Einsatz, das OS ist generell nicht für zum Stromsparen (leider) gedacht. Die Karte ist hier nicht mal das Problem. Sophos XG Beim zweiten System ohne 10G-Karte sieht ja die Geschichte schon anders aus und hier ließ sich noch ein paar Watt mehr einsparen. Proxmox

Hab zwei SN700 (500GB & 1TB) auf einem Gigabyte C246M-WU4 und hatte die gleichen Probleme. Hab es mit dem Boot-Parameter / Syslinux configuration "nvme_core.default_ps_max_latency_us=8000" in den Griff bekommen.

Nächste Woche geht's an den Switch-Austausch

Thanks ! Yes, after the first coffee, i understand it

A good questions I can live with single / individual disks, but if i choose individual disks, i will have no parity, hm ?

I like the idea with the ZFS-integration, but what about the spindown ? Is the spindown still possible with a ZFS-pool (2x Parity & 2x Data Disks) ?

8GB USB 2.0 reicht vollkommen aus

Allgemeiner Homelab-Worklog

Joar, je nachdem was @SyrincsAnforderungen sind. Welche WAN-Anbindung ? IPS / IDS aktiv ? TLS-Inspection ? VPN ? Bis 500 Mbit reicht eigentlich auch ein kleiner sparsamer Fujitsu Futro 920. Ab 500 Mbit muss man ein bisschen rumprobieren - kann sein, dass der N5105 da schon etwas zu schwach ist. Bin mir nicht sicher ob sich da mittlerweile bei OPNsense etwas getan hat, aber in erster Linie wars damals so, dass die Single-Thread Performance ausschlaggebend ist. Ich nehm für das "Sizing" gern https://www.cpubenchmark.net/compare/

Schau dir mal einen Lenovo M720Q an, @Syrincs Da reicht dir schon die kleinste Variante mit dem Intel Pentium Gold G5420. Hab mit SFOS (TLS-Inspection: off / IPS: on) bei einer ausgelasteten 1Gbit WAN-Leitung eine CPU-Auslastung von ca. 50 %. Lenovo M720Q ~ 130 € -> https://www.one.de/office-pc-lenovo-centre-m720q-75181 Lenovo PCIe Riser (01AJ940) ~ 30 € -> https://www.jacob.de/produkte/lenovo-bld-tiny5-01aj940-artnr-5839858.html Intel i350-T4 ~ 50 € -> https://www.ebay.de/itm/133772171174 Bei meinem Lenovo M720Q von One.de war eine M.2 verbaut. Eine M.2 wirste brauchen, da durch den Verbau der Netzwerkkarte keine SATA-SSD mehr verbaut werden kann. Verbrauch liegt mit Sophos XG (SFOS) bei 19-21w. Denke mit OPNsense kriegste den Verbrauch nochmal ein paar Watt runter.

Vorher: 22-25w Nachher: 19-21w Nicht viel, aber die Masse machts Leider lässt SFOS es nicht zu weitere Programme für die Verbrauchsoptimierung zu installieren. Die M720q sind so klein, dass ich sie theoretisch im Fractal R5 noch unterbringen könnte 😀

Hab exakt das gleiche Problem - nur mit Proxmox und Linux 5.15.83-1-pve- und auch dem neueren Linux 6.x.x-pve-Edge Kernel.

+1

Heute mal geschaut ob eine X710-DA2 auch in den M720Q passt. Durch das Entfernen der vorderen WLAN-Antenne und der Luftführung kriegt man auch längere Karten (bis ca. 168mm) unter. Werde die nächsten Tage mal schauen wie sich der "kleine" Intel Pentium Gold G5420 sich mit SFOS verträgt und ob man ggf. hier nochmal ein bisschen sparen kann.

Bei mir liegt grad ein M720Q auf dem Tisch, an dem ich aktuell verschiedene Kombinationen teste. Die Teile sind schon sehr genial 😍

Hab mal noch 1-2w rauskitzeln können, in dem ich über ein EFI-Stick und modgrubshell.efi folgende Optionen freischalten konnte: CFG-Lock deaktivieren setup_var_cv Setup 0x721 0x01 0x00 Undervolting und Anpassung der P1 und P2 erlauben setup_var_cv Setup 0x7BD 0x01 0x00 Thunderbolt 3 Karten erlauben setup_var_cv Setup 0x521 0x01 0x01 Die CPU wurde mit intel-undervolt undervolted und die TDP auf 15w gesetzt. Wer sich Proxmox neber Unraid auch mal ansehen möchte, dem kann ich folgende Toolkits ans Herz legen: - https://tteck.github.io/Proxmox/ - https://github.com/Tontonjo/proxmox_toolbox

Wenns sparsam sein soll, nehm keine Mellanox ConnectX3 - kann kein ASPM und somit erreichst du max. C-State C2 oder C3. Wenn die CPU tiefer schlafen soll, schau mal nach einer gebrauchten Intel X710. Statts der Samsung 970 Evo würde ich zu einer WD Red SN700 raten.

Sind dir die Silverstone Wechselrahmen nicht zu laut ? Hatte meine damals auf Arctic-Lüfter umgebaut. Bei meinem damaligen Chenbro-Gehäuse hatte ich auch das Problem mit den SATA-Ports des Mainboards. Ggf. kannst du da mit flexiblen SATA-Kabeln entgegenwirken: https://www.amazon.de/gp/product/B00V7NOJIS/ref=ppx_yo_dt_b_search_asin_title?ie=UTF8&psc=1 Wenn du dich nach 10 GbE-Karten umschaust, achte drauf dass die Karten ASPM unterstützen, da sonst die Karte die CPU hindert höhere C-States zu erreichen. Die Intel X710-Serie beherrscht z.B. ASPM und ermöglich dass wenigstens C-State C7 erreichst.

Sämtliche VMs sind auf dem Unraid-Server gestoppt und in Docker-Container / Proxmox verlagert worden. Für den PRTG-Server benötigte ich eine Alternative, da PRTG nur auf Windows läuft. Checkmk ist an sich genial aber an sich zu viel des Guten - hab mich schlussendlich für Uptime Kuma entschieden. Der Lenovo M720Q kam an. Erstmal wurde der VGA-Port, Serial-Port und die WLAN-Karte entfernt. Die Wärmeleitpaste erneuert und den RAM auf 16GB aufgestockt. Die zweite Nvme wurde per Lenovo PCIe-Riser und einem M.2 PCIe-Adapter installiert. Das BIOS war von 2019 und hat nicht alle C-States unterstützt. Durch das Aufspielen des neueren BIOS waren dann alle C-States verfügbar. Proxmox als ZFS mirror installiert. System optimiert mit powertop --auto-tune und CPU Scaling Governor auf "powersave" gesetzt. Idle: 5-6 Watt Last: 22 Watt Aktuelle Last: Verbrauch aktuell bei 11-12 Watt mit 5 LXCs. 2 davon haben Docker installiert auf denen laufen je LXC ca. 13 kleine Docker-Container. Die LXC-Container des Proxmox werden täglich per Netzwerk auf dem Unraid-Server gesichert und die wichtigsten Proxmox Host-Dateien per Skript.

Nachtrag: Scheinbar "verträgt" sich das ASRock-Mainboard in Kombination mit ASPM besser mit SFOS. SFVH_SO01_SFOS 19.5.0 GA-Build197# lspci -vv | awk '/ASPM/{print $0}' LnkCap: Port #2, Speed unknown, Width x16, ASPM L0s L1, Latency L0 <256ns, L1 <8us LnkCtl: ASPM L0s L1 Enabled; RCB 64 bytes Disabled- Retrain- CommClk+ LnkCap: Port #0, Speed unknown, Width x0, ASPM unknown, Latency L0 <64ns, L1 <1us LnkCtl: ASPM Disabled; Disabled- Retrain- CommClk- LnkCap: Port #5, Speed unknown, Width x4, ASPM unknown, Latency L0 <1us, L1 <16us LnkCtl: ASPM L1 Enabled; RCB 64 bytes Disabled- Retrain- CommClk+ LnkCap: Port #0, Speed unknown, Width x8, ASPM unknown, Latency L0 <2us, L1 <16us LnkCtl: ASPM L1 Enabled; RCB 64 bytes Disabled- Retrain- CommClk+ LnkCap: Port #0, Speed unknown, Width x8, ASPM unknown, Latency L0 <2us, L1 <16us LnkCtl: ASPM L1 Enabled; RCB 64 bytes Disabled- Retrain- CommClk+ LnkCap: Port #0, Speed unknown, Width x4, ASPM unknown, Latency L0 <4us, L1 <64us LnkCtl: ASPM L1 Enabled; RCB 64 bytes Disabled- Retrain- CommClk+ Jetzt idled die Firewall bei 22-25w. Der Raspberry Pi 3b+, auf dem lediglich eine zweite Instanz des AdGuard DNS lief, hat ca. 5-6w mit PoE-Hat benötigt. Dieser wird die Tage gegen einen Lenovo ThinkCentre M720Q Tiny getauscht. Ist zwar etwas Oversized, aber der M720Q verbrät im Idle unterm Strich mit einen i3-8100T oder i5-8400T nicht mehr als der eingesetzte Raspberry Pi.

Da der Staubfilter hin und wieder gern mal vibriert hat, wurde dieser durch eine weitere Anti-Dröhnmatte getauscht. Die Dröhnmatte hat exakt die gleiche Dicke des Staubfilters und hat problemlos seinen Platz im Einschub des Staubfilters gefunden. Die Laufwerksschächte und das eine Seitenteil haben noch einen Streifen erhalten Das Netzteil wurde gedreht, da es durch den Boden jetzt keine Luft mehr ziehen kann

Die OCPs werden ähnlich so viel verbrauchen wie die PCIe-Varianten. Quelle: https://www.servethehome.com/intel-x710-da2-ocp-nic-3-0-review-10gbe-for-the-form-factor/intel-x710-ocp-nic-3-0-power-consumption-specs/