August 13, 20233 yr 4 hours ago, i-B4se said: Ich habe noch keinen meiner PCIe-Slots belegt, aber ich wollte eigentlich den x1 verwenden. Aber da das anscheinend nicht ausreichend ist müsste ich einen anderen Slot nehmen. Der x16-Slot kann Bifurcation und da könnte ich das anwenden. Aber was mich an der ganzen Sachen stört, ich möchte irgendwann einen SATA-Karte verwenden und dann wäre dieser Slot belegt. Eieieiei, das Thema schein nicht so einfach zu sein. Neugierigerweise: Betrifft eine Anfrage das ASRock Rack X570D4U-2L2T aus der Signatur? Wenn Du 2 dieser Spezialkarten zu je PCIE 2.0 per Adaptierung in dem Bifurcation fähigen Slot betreiben wirst, ist das zwar ziemliche Verschwendung von leistungsfähigen PCIe Lanes, aber technisch sollte das funktionieren. Wenn Du irgendwann eine SATA Karte nachrüsten willst, kann diese im PCIe x1 Slot betrieben werden. Entweder eine ASM1064 Steckkarte mit 4 SATA ports, sollte für ca. 1GByte/s = 4x 250MByte/s Festplatten problemlos ausreichen. Oder eine ASM1166 Steckkarte mit 6 SATA Ports, von denen man aber besser auch nur 4 SATA Ports im Array benutzt, weil die in dem selben Slot auch nur ca. 1GByte/s mitmacht. Die ASM1166 Karten gibt es als x4 Bauweise, die dann aber nicht dort hinein passt. Also muß man auf eine ASM1166 x1 setzen. Zusatzkarten können einem die C-States beeinflussen, aber bei den ASM1166 kann man meist eine alternative Firmware aufspielen, die sich ggf. vielleicht besser verhält.
August 13, 20233 yr Author 5 hours ago, DataCollector said: Neugierigerweise: Betrifft eine Anfrage das ASRock Rack X570D4U-2L2T aus der Signatur? Jap, das ist richtig. 5 hours ago, DataCollector said: Wenn Du 2 dieser Spezialkarten zu je PCIE 2.0 per Adaptierung in dem Bifurcation fähigen Slot betreiben wirst, ist das zwar ziemliche Verschwendung von leistungsfähigen PCIe Lanes, aber technisch sollte das funktionieren. Jup, und deswegen ärgere ich mich so, dass es nicht irgendwie in dem PCIe 4.0 x1 Slot geht. Die Leistung wäre ja ausreichend. Ich bin mir halt nicht sicher ob dieser Dual Edge TPU Adapter auf meinem Board beide TPUs erkennt. Dann wäre die Sache relativ einfach. https://github.com/magic-blue-smoke/Dual-Edge-TPU-Adapter 6 hours ago, DataCollector said: Wenn Du irgendwann eine SATA Karte nachrüsten willst, kann diese im PCIe x1 Slot betrieben werden. Entweder eine ASM1064 Steckkarte mit 4 SATA ports, sollte für ca. 1GByte/s = 4x 250MByte/s Festplatten problemlos ausreichen. Das sollte definitiv reichen. 6 hours ago, DataCollector said: Zusatzkarten können einem die C-States beeinflussen, aber bei den ASM1166 kann man meist eine alternative Firmware aufspielen, die sich ggf. vielleicht besser verhält. Bei meinem Board ist eh nur C3 möglich - mehr geht da nicht und wird auch nicht angezeigt. Des Weiteren wird durch diese TPU die CPU extrem entlastet, wodurch der Verbrauch gesenkt wird.
August 22, 20232 yr Author So, mein Dual Edge TPU Adapter ist angekommen. Werde den die Tage mal einbauen und hoffentlich klappt alles Edit: Konnte es nicht lassen Beide TPU werden erkannt. Edited August 22, 20232 yr by i-B4se
August 22, 20232 yr Author @ich777 Evtl. kannst du mir weiterhelfen. Eins vorweg, mein Array ist noch nicht gestartet. Ich hab den oben geposteten Adapter für mein Dual Edge TPU und laut Geräte werden beide erkannt. Die Treiber habe ich aus dem App-Store installiert. Aber hier habe ich schon ein kleine Rückfrage: Ein Chip wird erkannt und der andere ist im Shutdown. Ist das richtig so? Dann habe ich das in den Logs stehen und läuft auch immer weiter. Werden evtl. doch nicht beide TPUs erkannt?
August 22, 20232 yr Author Hab den Server jetzt zwei mal neu gestartet und nun wird es richtig angezeigt:
August 22, 20232 yr 49 minutes ago, i-B4se said: OMG, lässt du das so? 19 minutes ago, i-B4se said: Ein Chip wird erkannt und der andere ist im Shutdown. Weil die sofort überhitzen!!! Bitte bau das sofort wieder aus. Bitte beachte das der Dual TPU keine Kühlung mit liefert und du das selbst eine aufbauen musst, steht sogar in der Dokumentation -> bitte vergiss auch nicht das in der Dokumentation steht das diese dinger ohne Kühlung Wortwörtlich: ein Firehazard sind!!! Hier geht es weniger um die TPU selbst sonst um die Spannungsregelung, könnte auch gut sein das dir schon eine abgeraucht ist wenn du da schon mal Last drauf hattest, aber wenn er anzeigt das er keine Temperatur ausließt heißt dies meistens das ein TPU defekt ist bzw. noch im shutdown ist, da musst wirklich den Server aus und an machen. EDIT: Okay die haben das schon ein wenig entschärft hier, Punkt 5.3.2
August 22, 20232 yr Author @ich777 Keine Angst, das waren nur vorab Bilder. Ich Poste hier gleich ein weiteres. Da sind Kühlkörper drauf - auf der Vorder- und Rückseite.
August 22, 20232 yr Author So sieht das Paket aus Aber irgendwie findet Frigate den TPU nicht, obwohl die Treiber anständig geladen sind.
August 22, 20232 yr 1 minute ago, i-B4se said: Aber irgendwie findet Frigate den TPU nicht, obwohl die Treiber anständig geladen sind. Wie sieht denn dein template von Frigate aus, hast du auch das Gerät durchgereicht?
August 22, 20232 yr Author 7 minutes ago, ich777 said: Wie sieht denn dein template von Frigate aus, hast du auch das Gerät durchgereicht? Es wird halt nur eine TPU gefunden. Die TPU für PCI:1 wird nicht gefunden Muss da noch was anderes im Template geändert werden?
August 22, 20232 yr 4 minutes ago, i-B4se said: Es wird halt nur eine TPU gefunden. In Frigate? Ja weil du auch nur eine TPU durchreichst, du reichst laut deinem template nur apex_0 durch und nicht auch apex_1 Mach einen zweiten Eintrag als Device und reich dort /dev/apex_1 durch.
23 hours ago23 hr Author Moinsen Leude,lang ist es her TL;DR:Mein aktueller Server mit Ryzen 5 PRO 4650G kommt langsam an seine Grenzen, vor allem was die verfügbaren Kerne und die Single-Thread-Leistung der Gameserver angeht.Geplant wäre der Wechsel auf ein ASRock Rack W880D4U mit einem Ultra 7 265K bzw. 270K PLUS. Dabei müsste ich allerdings auf ECC verzichten und zusätzlich eine 10-Gbit-Netzwerkkarte verbauen.Daher die Frage:Gibt es ein alternatives Board mit 8x SATA, 10 Gbit und IPMI?Oder würdet ihr aktuell gar nicht groß umbauen, sondern einfach einen Ryzen 7 PRO 5750G in das vorhandene System stecken und die aktuelle Marktsituation aussitzen?Hier ein bisschen ausführlicher:Ich plane ein Upgrade für meinen Server und wie wir alle wissen, ist es natürlich gerade nicht die beste Zeit dafür. Leider muss aber langsam etwas passieren.Aktuell habe ich folgende Hardware verbaut:ASRock Rack X570D4U-2L2TAMD Ryzen 5 PRO 4650G64 GiB DDR4 ECC6x HDD2x NVMe M.2 als Cache1x SSD für SurveillanceDual Edge TPU für Surveillancekomplett 10 GbitDocker und VMs, die dauerhaft laufen:Docker, insgesamt rund 30 Stück:CrowdSec mit etlichen eigenen SzenarienNPMFrigate mit 8 Kameras, dafür auch die TPUNextcloud mit ca. 10 NutzernPaperlessPlexetliche DatenbankenRedisPasswortmanagerund noch einiges mehrVMs:Home Assistant, mittlerweile ziemlich groß gewordenAMP Gameserver, einige Server laufen dauerhaft und sind gut besucht, andere werden nur bei Bedarf gestartet2x WindowsDie sechs physischen Kerne sind für die beiden Haupt-VMs, die Container und den Host mittlerweile einfach etwas knapp bemessen. Die Windows-VMs lasse ich dabei mal außen vor, dafür kann ich mir notfalls etwas anderes überlegen.Allein die Gameserver-VM belegt drei Kerne und Home Assistant weitere zwei. Damit bleibt im Grunde nur noch ein Kern für den Host und sämtliche Container übrig.Aus diesem Grund sind die Container aktuell auch nicht auf bestimmte Kerne gepinnt und können somit auf die Kerne zugreifen, die eigentlich von den VMs genutzt werden. Dadurch beeinflussen sich die einzelnen Dienste natürlich teilweise gegenseitig.Dazu kommt bei den Gameservern noch das Single-Thread-Limit. Der Simulationsthread enfMain liegt bereits bei mehreren Spielern bei rund 85 % Auslastung.Meine geplante Umstellung:ASRock Rack W880D4UDas W880D4U-2L2T ist ja gefühlt seit Ewigkeiten nicht lieferbar.Intel Core Ultra 7 265K oder Ultra 7 270K PLUS64 GB DDR5Jetzt gibt es dabei allerdings zwei Dinge, die mich ziemlich stören 😧Non-ECC, da ECC aktuell einfach abartig teuer ist. Normaler RAM ist preislich schon grenzwertig, aber ECC schießt komplett den Vogel ab.Kein 10 Gbit auf dem Board, sprich ich brauche zusätzlich noch eine Netzwerkkarte.Ich bin deshalb ziemlich hin- und hergerissen, ob ich das Upgrade wirklich machen soll. Die Preise und die Verfügbarkeit sind momentan einfach abenteuerlich.Zum einen stört mich der Verzicht auf ECC und zum anderen, dass ich bei dem Board noch eine zusätzliche Netzwerkkarte brauche.Ein alternatives Board, das meine Anforderungen erfüllt, habe ich bisher aber auch nicht gefunden:8x SATA10 GbitIPMIWas würdet ihr machen?Komplett auf die neue Plattform umbauen?Oder einfach einen Ryzen 7 PRO 5750G in das vorhandene Board stecken und erst einmal warten?Wobei sich natürlich die Frage stellt, ob Preise und Verfügbarkeit in absehbarer Zeit überhaupt wieder besser werden, gerade beim RAM.Besten Dank vorab :)
Join the conversation
You can post now and register later. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.