Smolo

Aber ist das nicht bissel gefährlich in dem ganzen Unraid Kontext der App die Platte fest zu verdrahten?

Nein nutze nur die User Pfade. Aber selbst wenn der Mover langsamer schiebt sollte das doch bei den mini Files rasend schnell gehen oder hat Unraid hier sogar ein "IO" Bottleneck auf Dateien? Mal unabhängig vom Mover sehe ich es immer häufiger bei PCs das Kopieren (kleine Files), Berechnen, etc. dauert ewig lang obwohl Ressourcen satt zur Verfügung stehen. Normalerweise müsste eine Maschine ja auf 100% gehen und bei dem Speed alles rasend schnell verarbeiten...12 Kerne, 64GB RAM, PCIE4 NVME und ne SSD und der schreibt KB/s^^ Irgendwo muss doch da ein Flaschenhals sein?

Index rennt immer noch nach 1 1/2 Tagen und steht jetzt bei ca. 150.000 von 200.000 Dateien. Dazu mal zwei Fragen an unseren Profisupporter 🙂 @mgutt 1) Liegt die schlechte Performance jetzt an der App? Alle Kerne werden beanspruch aber die CPU läuft bei 30-40%...Platten langweiligen sich auch? 2) Heute Morgen ist der Mover angesprungen und lief jetzt 14h. Ich hab grad mal das Cache Verzeichnis von Photoprism gescannt und da liegen jetzt bereits 1.5Mio kleine Files. Aber auch hier stellt sich mir die Frage warum ist die Performance so langsam wenn nur 500kb/s bis 2-3Mb/s geschoben werden?

Tipp: Einen anderen Port und nicht den Standardport für Wireguard verwenden, dass beugt unnötigen Anfragen im Netz vor und erhöht etwas die Sicherheit falls doch mal ein Bug in Wireguard festgestellt wird.

Du hast mich grad mit cracyfloyd verwechselt und ich hatte/habe unabhängig von ihm das identische Problem aber ich bin da grad noch im Testaufbau. Das mit dem Stromausfall wird noch lustiger werden die nächsten Jahre und meine QNAP z.B. die brauch locker 5min bis Sie runtergefahren ist daher fahre ich die 1-2min direkt nach dem Stromausfall runter. Passiert natürlich extrem selten aber man versucht ja dem schlimmsten Fall vorzubeugen. Mein Unraid Server hat einen 40min Puffer da sehe ich das entspannter PS: Ich hab mittlerweile in der Wohnung die ganze zentrale Infrastruktur an der UPS hängen...Erfahrungswerte...im Homeautomation Bereich

Du kannst damit im IoBroker die UPS(en) auslesen und dann zum Beispiel per Telegram Nachrichten versenden, die Bude "runterfahren", die Werte der UPS historisieren, Strommessung usw.. Ich persönlich hab an der SPS Anlage auch eine extra UPS und nicht nur für den Server. Ich kommt leider trotz Freigabe Client/Docker aktuell nicht drauf aber in der Wohnung werde ich da nichts mehr ändern das kommt erst im größeren Projekt

Es gab oder gibt noch einen offenen Punkt bei Wireguard das DNS Anfragen nicht gesteuert werden können auf dem Standarddevice daher ist es eigentlich schon so das nicht über Wireguard beantwortete Anfragen auf den Default bzw. die alternativen DNS Server gehen! Das liegt aber an der Architektur (VPN als Network Interface).

Ich hab jetzt mal alle Cache Daten gelöscht und lass das jetzt mal mit einer MariaDB durchlaufen und schaue wie Photoprism mit >200.000 Files und 1,5TB klar kommt. Wenn das nicht wuppt muss ich wohl weiter auf die Suche gehen und schaue mir mal Photoview an. Bei dem Speed des Index wird sich das aber ne ganze Zeit hinziehen.

Genau so ist das richtig, die DNS Anfrage ist sozusagen in einem Tunnel gefangen dem in diesem Moment der Ausgang fehlt wenn ich das richtig verstanden habe. Der MAN in The Middle kann sich nicht reinhängen weil der den Schlüssel für die Tür nicht kennt.

Ging doch hauptsächlich darum das man beim Wireguard Client nicht sehen kann ob wirklich eine Verbindung besteht mal ganz unabhängig dessen ob VPN Anbieter oder nicht. Ich hab sowas bisher noch nicht genutzt weil mir das einfach zu Spooky ist wer da hinter den Anbietern sitzt. Was bringt dir das vor dem nach Hause telefonieren bzw. wo siehst du da den Vorteil?

Was denn für Privatsphäre? Ich habe noch nie verstanden wie man einem x beliebigem Drittanbieter für Geld sämtlichen Traffic vor die Füße kippen kann Das ist so als wenn du mir sagst mein Dealer ist böse aber deiner will nur das Beste für uns alle, dem kannst du voll vertrauen ^^

Ja das ist sehr unschön aber aktuell ist das leider so 😞 Wireguard baut die VPNs als Netzwerk Interface und wenn er das startet ist es eben da auch wenn der Remote Host auf der anderen Seite gar nicht erreichbar ist. Einzige Möglichkeit festzustellen das die Verbindung steht ist das man sowohl ein- wie ausgehend Datenpakete beobachten kann.

Oh shit die Info kannte ich nicht 😞 In dem Cache Verzeichnis von Photoprism liegt auch die sqlite DB. D.h. ich muss das definitiv auf ne extra Datenbank auslagern. Ich hoffe mal mit den anderen Files passt das zumindest weil die ganzen JSON und YML Files sollten selbst bei der nachträglichen Indizierung nicht verändert werden. Womit verwaltest du deine Bilder, du hast doch auch die SSDs extra für die im Einsatz? Nachtrag: Zusatzfrage am Rande wenn man jetzt ne 500MB Datei ändert wie wirkt sich das dann auf die Geschwindigkeit aus? Bei einem User sind die 70MB schreibend ja nicht so wild aber wenn da mehrere bestehende Dateien bearbeiten geht die Performance ja wirklich flott in den Keller?

@mgutt Kurze Frage an den Experten. Ich habe gerade den Indexscan im Photoprism gestartet und bin extrem verwundert warum er jetzt auf der SSD bzw. Parity schreibt und liesst? Für den Zugriff auf die Disk 4 braucht es doch eigentlich kein Parity? Die Foto-Daten ebenso wie die Cache-Daten des Photoprism Container liegen auf dem Fotos Share. Das Share hat die Option Cache Yes gesetzt. Wenn der Index läuft oder irgendwas passiert sollte doch erstmal rein gar nichts auf die SSD bzw. die Parity geschrieben werden und erst wenn der Mover anzieht oder?

Du kannst mittlerweile einzelne Verzeichnisse indizieren lassen. Bezüglich fehlenden Bilder hab ich noch keine Erfahrung aber es gibt ein paar Optionen dafür:

Last famous words bitte nicht usability freundlich mit YT Generation gleichsetzen. Niemand hat etwas gegen SW die selbsterklärend ist Wenn es soweit ist werde ich mir das trotzdem noch mal anschauen in einem Vergleich Sense vs. Mikrotik. Du hast mich bei dem Thema aber falsch verstanden. Mir geht es gar nicht um Sicherheitslücken die durch einen guten Support korrigiert werden sondern reale Backdoors welche durch Regierungen vorgeschrieben werden! Ich hatte diesbezüglich beim letzten Zyxel Vorfall eine öffentliche Diskussion mit dem Support. Am Ende der Konversation auf meine Frage welche Firmware denn frei von Backdoors ist wurde lediglich auf die länderspezifischen Regelungen verwiesen und das hat mich persönlich noch mal ziemlich wachgerüttelt was das Thema angeht.

Ich bin da voll bei dir aber für mich gibt es zwei Gründe warum ich Router von Fremdherstellern ausgeschlossen habe. 1) Die Software von Mikrotik fand ich einfach abartig gruselig und bin damit überhaupt nicht klar gekommen vor ein paar Jahren. Ist das immer noch so schlecht? 2) Jeder Router hat Backdoors (d.h. alle Hersteller) und auf so eine Verarschung habe ich keine Lust mehr. 😞

Im Standard ja aber du kannst das einstellen. Ich hab das jetzt wie folgt gemacht: "Fotos" Share - Cache YES - Inhalt von dem Share landet nur auf dieser DISC Ergebnis: - Wenn was neues rein kommt geht es erst einmal auf den schnellen Cache und ohne Parity Disc! - Mover schiebt den Inhalt dann vom Cache auf die SSD mit Parity - Lesen braucht keine Parity d.h. die Platte sollte immer aus sein und die Latency und der Speed von der SDD da sein Wenn das alles läuft geb ich noch mal bescheid. Mein 1,2TB Upstream läuft noch 24h^^ Und der Scan wird bestimmt 2-3 Tage rennen. Falls du die Thumbs auf dem Cache lassen magst in den Backup Einstellungen einfach den Exclude auf das Verzeichnis definieren.

Das Board schaut sehr lecker aus 🙂 aber momentan noch 20-30w zu viel das könnte sich ja durchaus ändern. Preislich sind sowohl CPU und Mainboard je sehr dicht an den HighEnd Lösungen im Konsumer Bereich dran nur das man beim Server Krempel dann weniger Stress hat und das System einfach aufbaut statt sich Wochenlang mit Problemen und Einschränkungen zu beschäftigen. Aber die Zeit und der Druck durch ARM und Mobile Bereich werden das schon richten.

Vielleicht etwas Offtopic aber trotzdem nützlich. Bezüglich Eigenbau Router kann ich das hier empfehlen. Router selber bauen | Internet SCHNELLER und Ping BESSER! (OPNsense + Firewall) Ich werde das Projekt beim nächsten Wechsel auch angehen und hier auf einen MiniPC setzen weil mir die Kontrolle bei den Fritzboxen einfach zu gering ist. Aber nach Jahren des bettelns wird AVM in die Fritzboxen wohl nativ Wireguard integrieren d.h. man kann sich etwaige Bastellösungen zukünftig sparen.

Auf den ersten Blick interessant allerdings wieder unsägliches Gebastel auf den QNAPS was ich unbedingt vermeiden wollte weil man bei den Devices tunlichst niemals was am Linux schrauben sollte. Aber ich werde mir das noch mal anschauen. Mein Filezilla Container Problem hab ich übrigens herausgefunden....das Backup von Unraid hat den Container natürlich beendet und damit alle laufenden Aktionen + Selektionen 🤪und die 1,2TB dauern bei 5Mbit Upstream leider "etwas" länger.

Du zockst aber keine Shooter oder?

Kurze Zwischenfrage @alturismo steht dein Unraid Server im Wohnzimmer und zockst du dann Lokal oder machst du wirkliches alles Remote? Auf was für einem Device um dann Remote dran zu gehen mit 4k etc und Zocken per Remote?

Über was für Schnittstelle läuft das bei Photosync? Das Upload Thema ist noch eines der wenigen "Probleme" wo ich noch keinen einfachen Ersatz für meine QNAP gefunden habe.

Um 16Uhr war ja Demo leider keine News zu Threadripper oder Epycs 😞 Aber die Werte für die neuen Mobile CPUs und den Rest haben sehr gut ausgeschaut teils 30% weniger Power. Für den 5800x soll ein neues Stepping mit 3DAND rauskommen da stand irgendwas von 15% Performance drinnen. Die Werte hier in dem Thread find ich ja mal gar nicht sooo schlecht bzw. weit weg von meinem System. https://forums.servethehome.com/index.php?threads/amd-epyc-milan-idle-power-consumption.34118/post-314477