SebastianSchmidt

Es gibt auch die XL710-Variante > https://www.intel.de/content/www/de/de/products/sku/83967/intel-ethernet-converged-network-adapter-xl710qda2/specifications.html Bezüglich der X710 (10G) kann ich bestätigen, dass ich C8 States (womöglich geht auch höher?) erreicht habe, aber die XL710-Variante habe ich selbst nicht.

@jammsen Ich habe weiter oben im Thread mein System schon beschrieben: Die CPU war ein Gelegenheitskauf – ein 14700k wäre sicher sowohl leistungsfähiger als auch allgemein günstiger zu haben. Alternativ käme vielleicht preislich auch ein 13900K für Dich in Frage? Die Cores sind aus Sicht von Unraid schlicht "nutzbare Kerne". Welche Cores für welche Arbeit genutzt werden lege ich per Pinning fest - ich weise meinen VMs exklusiv Kerne zu und Unraid verteilt die übriggebliebenen auf Docker Container und das Unraid-OS. Einzige Ausnahmen sind der Paperless-Container, dem ich 3 E-Cores zugewiesen habe und Photoprism mit 4 E-Cores. In der Konstellation bleibt die Prozessorauslastung etwas konstanter und der Verbrauch ist nahezu stabil. Im Idle (ohne Grafikkarte und ohne Docker/VMs) verbraucht der Server etwa 26-29W. Bei der Messung steckt dann aber eine X710 Netzwerkkarte drin, 3x NVMe-SSDs + 3x SATA SSDs.. Das Board erreicht damit C6 - was sicher nicht optimal ist, aber doch schon ganz gut. Im Betrieb liege ich aktuell zwischen 40-45W, mit Peaks bis 165W wenn ich z.B. meinen Chatbot oder FasterWhisper nutze.

@jammsen Ich habe Deine Antwort gelesen. Ich weiss allerdings nicht ob es "gut/spitze" ist, wenn zwei GPUs im Idle knapp 30W brauchen - aus meiner Sicht ist die 3080Ti im Server nicht am richtigen Ort (wesentlich zu hoher Idle-Verbrauch) und ich würde versuchen sie evtl. mit einer weiteren 4060 zu ersetzen. Ich hoste keine Gameserver....ich kann Dir deshalb kaum etwas raten. Ist einfach nicht mein Nutzungsprofil. Für meine Desktop PCs setze ich schon seit vielen Jahren auf AMD Prozessoren (schon vor Barton). Aufgrund des hohen Grundverbrauchs meiner Server mit AMC CPUs (z.B. 75W Verbrauch mit einem Ryzen 7900 bei einer Last von 1-3%, ohne zusätzliche Grafikkarte) bin ich in dem Bereich allerdings auf eine Intel Plattform umgeschwenkt. Aktuell habe ich einen 28-Core auf einem mittelpreisigen Gigabyte Board - leistungshungrige Anwendungen und VMs lege ich auf Performance Cores und habe dann jede Menge Efficiency Cores für Docker Container etc. "übrig". Dass ist für meine Zwecke sehr praktisch und durch geschickte Verteilung/Nutzung von P- und E-Cores kann ich die Effizienz des Servers maximieren. Vielleicht stellst Du noch ein paar gezielte Fragen, die jemand mit mehr Erfahrung im Bereich Gaming-Server beantworten kann? Was möchtest Du denn exakt wissen?

Ich denke, das kommt auf die exakte HW-Wahl drauf an...es muss alles "stimmig sein", damit der Energieverbrauch aus Deiner Sicht passt. In diesem Forum gibt es dazu ja haufenweise sinnvolle, getestete Setups die Du nachbauen könntest und bei denen Du Dir dann sicher sein kannst, dass das Ergebnis am Ende für Dich stimmt. Mein System: 192 GB RAM Intel 14700T (auf 65W P1, statt 35W) 3x SATA SSDs 870 EVO SSDs von Samsung 3x Lexar NM790 1x 16TB Seagate X18 RTX3060 12TB (P8) X710-DA2 Netzwerkkarte über DAC-Kabel angeschlossen M.2 ASM1166 Controller (da ist die Festplatte angeschlossen) MB Gigabyte Z790 Gaming X Seasonic Prime Ultra Titanium (650 W) Es laufen gerade 16 Docker Container, 2 davon haben Daten in den RAM der Grafikkarte geladen, die Festplatte ist im Preclear und eine Home Assistant VM läuft. In genau diesem Zustand zieht der Server zwischen 49-54W. Ich finde den Verbrauch, gemessen am Nutzen, ganz gut - aber das ist eben letztlich eine sehr individuelle Sache und mein Setup passt ja sicher nicht für jeden. Für einen reinen Fileserver wäre mir der Verbrauch zum Beispiel deutlich zu hoch. Wieviel dürfte denn Dein System "ziehen", damit Du Dich damit wohl fühlst?

Ahso...naja, ich habe keine vergleichbaren Geräte, die ich messen müsste. Eine der Steckdosen hängt normalerweise an meiner Waschmaschine, um über den aktuellen Verbrauch Aktionen und Meldungen über den Waschzustand auslesen zu können. Meine Home Assistant VM informiert mich auf diese Weise, wenn die Wäsche fertig ist. Den möglichst exakten "echten Verbrauchswert" (oder Kalibrationswert) für die Nutzung mit einem PC-Netzteil wüsste ich zwar schon gerne, aber der Server ist ja leider kein reiner ohmischer Verbraucher - daher meine Überlegung mit dem Shunt. Ich muss aber sagen, dass mich die Messsituation nicht sonderlich stört weil es für mich eher unerheblich ist, ob der Server im Idle jetzt 9w oder 11w verbraucht. Es ist höchstens ein bisschen schade, dass ich hier im Forum nur "relative" Werte angeben kann. Deshalb habe ich auf die Messunsicherheit hinweisen wollen. 🤷‍♂️ Bezüglich Stromsparmassnahmen bin ich zwar nicht ignorant, aber für meine Anwendungszwecke brauche ich ja ohnehin eine Grafikkarte und eine zusätzliche NIC. Dadurch rutsche ich verbrauchsmässig aktuell in den 30W+ Bereich im Idle und hier fällt der Messunterschied meiner zwei Steckdosen prozentual nicht mehr so ins Gewicht. Für Dich als Kenner habe ich aber noch zwei Messwerte... ☺️ > im Trockner-Modus bei ~1680W "Heizleistung" misst eine Steckdose 1680W und die andere 1679W. Ich habe sie einfach direkt hintereinander gehängt und dabei die Steckdose, die die niedrigeren Werte misst in die andere Messsteckdose gesteckt (Daisy-Chain), damit der Momentanverbrauch identisch war.

@MPC561 Ich habe mir schon überlegt, ein paar ohmsche Verbrauchsmessungen durchzuführen, indem ich ein Multimeter für die Strommessung dazwischenschalte. Allerdings war ich bisher immer zu faul dazu - mich hat die "ungefähre Grössenordnung" des Verbrauchs zwar schon interessiert, aber ich war doch eher auf die Vergleichbarkeit der Messungen aus. Deshalb habe ich mich für die Steckdose entschieden, die die trägste Anzeige hat...das ist zufällig die, die auch die höchsten Messwerte anzeigt. Eine genaue Messung mit einem kalibrierten Messgerät wäre aber natürlich schon schön....ich hab bloss keins. Eine 100W Glühbirne braucht halt leider auch nicht genau 100W, wie Du schon geschrieben hast und ich kenne auch keine Glühbirnen, die eine Genauigkeitsklasse aufweisen. Ein niedriginduktiver Shunt wäre vielleicht etwas? 🤔

Ich habe nur den Testbericht von Computerbase zum grösseren Bruder (850W) gelesen - dort wird aber nicht explizit auf die Verlustleistung bei einem Verbrauch von sagen wir mal 10W eingegangen. Ich habe eigene Vergleichswerte: be quiet! DARK POWER 13 750W - beim Setup mit Trendnet 10Gbe with AQC100 messe ich einen Verbrauch von 16W (sehr stabile Anzeige) Seasonic Prime Ultra Titanium (650 W) - beim Setup mit Trendnet 10Gbe with AQC100 messe ich einen Verbrauch von 13-14W (Anzeige schwankt, daher kann man von einem Wert um die 13.5W ausgehen) Das Seasonic ist in diesem Bereich offenbar 2-2.5W effizienter. Wenn ich die zusätzliche Netzwerkkarte herausziehe, fällt der Stromverbrauch um ca. 2W bei beiden Messungen. Demzufolge fällt die Effizienzkurve beider Netzteile in dem Bereich in der Tendenz etwa gleich ab. Dasselbe Bild zeigt sich bei Verwendung der X540-AT2 (rev 01) mit Verbrauchswerten um 20W (be quiet!) bzw. 17-18W (Seasonic). Mehr Vergleichsmessungen kann ich leider anbieten... Das habe ich nur mit dem be quiet! DARK POWER 13 750W probiert (das Seasonic kam erst später hinzu). Mit sämtlichen SSDs (3x SATA, 2x NVMe) lag das System so etwa bei 11-12W idle. Die Messung ist bezüglich der Genauigkeit aber etwas problematisch. Ich habe zwei baugleiche Tasmota-Steckdosen und die beiden unterscheiden sich im Niedriglastbereich "deutlich"....eins misst bis zu 1.2W niedrigere Stromaufnahme als das andere Gerät. Bei meinen Messungen habe ich immer die "schlechtere" Messung verwendet.

@DataCollector Interessant, das war mir echt neu! Bei der Nutzung meiner drei SATA SSDs fällt das gerade noch nicht auf.... 😅 In einem Setup mit 3 NVMe im RAIDz Verbund plus einem Array mit 8 SATA SSDs oder vielleicht auch 2 RAIDz würde aber auch diese Einschränkung nur in ganz seltenen Fällen zu Engpässen führen, nehme ich an. Oder was denkst Du? Alternativ könnte man ja auch einen der drei M.2 Schnittstellen des Boards für einen ASM1166 Controller verwenden und hätte dann genügend Bandbreite für 8 SSDs....wie Du schon vorgeschlagen hast.

😂 .... nice! Alternativen? - Ich finde mein Kontron Kontron K3842-Q2 und mein Gigabyte Z790 Gaming X beide ausgezeichnet, aber nur das Gigabyte Board deckt wirklich alle Anforderungen ab (wegen der 2x PCIe x4 angebundenen Slots). Was wäre denn, wenn Du Dein Setup so planst, dass Du tagsüber auf ein NVMe-SSD ZFS RAIDz schreibst und in der Nacht den Moverdienst laufen lässt? Dazu eine X540-AT2 im Server > ein Port 1:1 mit Deinem Desktop verbunden und den 2. Port am Server für den Anschluss an Deinen Router oder wie auch immer Dein Netzwerk aussieht? Dann könntest Du die Onboard-NIC am Server ausschalten....und es würde "nur" eine NIC aktiviert sein.

Hm. Den ersten Punkt sehe ich mittlerweile etwas anders...ich habe jetzt ein Kontron, ein Asus und ein Gigabyte Board getestet und alle haben ausnahmslos miese Verbrauchswerte mit 2.5 Gbe Onboard-NICs (egal ob Intel oder Realtek), weil sich bei mir die ASPM-States auf disabled verändert haben, sobald die NICs im BIOS eingeschaltet wurden. Nur die 1Gbe Onboardkarten waren sehr sparsam (beinahe nicht messbar...so um die 1 W?). Mit den Intel X710er Karten bin ich ohne weitere Einstellungen/Tweaks sowohl deutlich schneller als auch ein paar Watt sparsamer unterwegs als mit den Onboard 2.5G Karten. Die Link-Down-Situation habe ich aber nicht weiter berücksichtigt, weil ich keine 1:1 Verkabelung habe, sondern mein Switch dazwischengeschaltet ist. Der Geschwindigkeitsunterschied lag (wenn ich mich noch richtig erinnere) bei 8.4-8.7 Gbits/sec mit RJ45 zu um die 9.5 Gbits/sec mit Glasfaser. Aber auch erst, nachdem ich ziemlich teure, mechanisch sehr steife CAT 8 Kabel gekauft hatte. Mit günstigeren Cat 7 Kabeln kam ich anfangs nur auf bis zu 6.5 Gbits/sec. Ausserdem sind die Glasfaserkabel unauffälliger hinter Sockelleisten zu verlegen und weil sie so dünn sind, passen sie unter der Tür durch den Türschlitz. 😅

Jep...total! 😏 Ich hab so ein RJ45 auf SFP Adapter um meinen qhora 301w Router an mein SFP-Switch anzuschliessen und das wird superheiss (> 55°C)...und der Stromverbrauch meines Switch steigt dabei um fast 3.5 Watt, sobald ich es einstecke. Auf der anderen Seite brauchen die restlichen Netzwerkkarten mit SFP selbst dann pro Port/Karte einige Watt weniger, selbst wenn man Glasfaserkabel verwendet statt DAC (also Kupferkabel mit SFP Konnektor). Ausserdem sind meine Durchsatzmessungen bei RJ45 basiertem 10Gbe Netzwerk immer niedriger gewesen als mit den Glasfaserkabeln - gemessen mit 15m Netzwerkkabeln.

Oha...ein echtes Biest - das kannte ich noch garnich! 😎 Bezüglich Stromverbrauch kommt es immer drauf an, welcher Chipsatz, welcher Kabeltyp....ein paar reale Testwerte habe ich mal ermittelt und in diesem Thread in die Config-Datei geschrieben: Intel hat für X710 Karten auch offizielle Verbrauchswerte publiziert > https://cdrdv2-public.intel.com/641693/Intel Ethernet Converged Network Adapter X710-DA2-DA4.pdf Für eine 1:1 Verkabelung würde ich heutzutage nur noch SFP Karten und Kabel verwenden. Die bekommt man zu akzeptablen Preisen direkt aus China (meine X710er Karten haben so um die 65 EUR das Stück gekostet). Kürzere Netzwerkkarten mit AQC100-Chips kosten in China etwa genausoviel, haben nur eine PCIe x4 Länge und sind auch super sparsam, brauchen meistens aber ein paar Tweaks (sieh oben verlinkten Post von mir).

Da hast Du wohl Recht - das neue Jonsbo n4 packt z.B. zwar 8 Drives (davon 2x 2.5"), aber eben auch mATX Boards! - Auf der anderen Seite könnte man ja mit etwas Geschick und Phantasie auch ein SSD-only System mit 8x SATA SSDs in ein winziges Gehäuse bauen...? Die SDDs bräuchten eigentlich keine Kühlung und könnten deshalb extrem dicht gepackt werden. Einfach einen entsprechenden Rahmen drucken.... @_alo_ MPC561 schreibt, dass es nicht unbedingt so sein muss, dass der 1. PCIe-Slot einem den Stromverbrauch in die Höhe treibt. Es würde mich ja freuen, wenn das bei dem H670er Board auch der Fall wäre! Dein Plan mit der NIC, die sich abschaltet wenn der Link down bezieht sich aber nicht darauf, dass der Stromverbrauch der Karte dann stark sinkt, oder? Bei meiner X710-DA2 sinkt der Stromverbrauch um vielleicht 1-1.5 W, wenn ich das DAC abziehe. Aber sie schaltet sich nicht "ab" in dem Sinne dass es vergleichbar damit wäre, dass man die Karte entfernen würde. Sie ist elektrisch immer noch verbunden, braucht immer noch Strom...ist bloss im Schlafmodus.

@MPC561 Uff...genau! Ich habe jetzt insgesamt 3 Mini PCs chinesischer Machart daheim (1x J3169 und 2x N100) und alle haben ein schlecht umgesetztes BIOS, keins hat eine saubere ASPM-Implementierung. Einfach ernüchternd...

@MPC561 Das gilt IMHO für die beiden ersten Boards, die hier besprochen werden. Das dritte Board mit dem H670 (oder Q670) Chipsatz ist doch ein ganz anderes Kaliber? Ich hätte mir das H670-Board beinahe zum testen bestellt, aber da ist schlicht das Problem, dass das Board nur einen einzigen PCIe Slot hat (Mini-ITX eben) und der wird ganz sicher direkt über die CPU angebunden sein. Wenn man da eine Karte reinsteckt (egal ob SATA-Controller, NIC oder Grafikkarte), wird der PKG-C-State wohl nicht über C3 kommen - das ist der einzige Grund, warum Mini-ITX Boards nicht für mich in Frage kommen.