40TB SSD Rechner speed beim kopieren teils bei nur 30MB/sec - zu wenig Lanes?

[DJMadMax]

meins das ? Mein PC kann leider keine Bifurcation
https://www.amazon.de/Adapter-RIITOP-Lüfterunterstützung-Verzweigung-erforderlich/dp/B0B1HPKLX5/ref=sr_1_10?crid=3H3F4SN8Z6ZSE&keywords=nvme+4x&qid=1690723337&sprefix=nvme+4x,aps,132&sr=8-10

Ja, so etwas "in der Art" - aber dann gewiss nicht den günstigsten Kram, den's bei Amazon gibt, der zudem auch kein gescheites RAID unterstützt.

Du hast jetzt folgendes Problem:
Du hast deine HDDs auf wild durcheinandergewürfelte SSDs umgestellt und fragst jetzt nach Hilfe/Besserung. Diese wirst du ausschließlich dadurch erfahren können, indem du dein Konzept erneut umdenkst und sauber neu aufbaust. Das kostet Geld, das kann leider niemand von uns ändern.

Dabei wäre es zu überlegen, ob du auf ein Workstation-Board (AMD oder Intel ist dabei egal) umsteigst, um von mehr PCIe-Lanes zu profitieren. Dann könntest du auch das Bifurcation (was dann vermutlich sowieso unterstützt wird) ignorieren und sparst dir eine Riser-Card, weil du alles auf dem Board direkt verbauen kannst.

Mit "alles" meine ich dabei weiterhin eine selektierte und saubere und vor allem homogene, also GLEICHE Ausstattung an SSDs - kein Wildwuchs aus zich verschiedenen Schnittstellen, Kapazitäten, Modellen, etc.

 

[photom]

https://geizhals.de/corsair-force-series-mp600-pro-nh-8tb-cssd-f8000gbmp600pnh-a2829393.html

Es gibt hervorragende 8 TB SSDs und wie so oft gilt: you get what you pay for.

Womit fotografierst du? Mit einer Disney Kinderkamera oder unter anderem halt doch mit der Nikon aus deinem Avatar? Ich weiß, dass ein guter Fotograf auch mit weniger gutem Equipment dennoch gute Fotos schießen kann, aber gleichzeitig kann man eben auch mit langsamen, schlechten SSDs bzw. einem total verkorksten Anschlusskonzept selbiger (wie in deinem Fall) dennoch Daten speichern - es dauert halt seine Zeit.

Kenn die SSD aber:
2x4TB für 300 oder 1x8TB für 900 kostet 3mal so viel. Halte ich für absurd vorallem wenn ich die mehr Geschwindkeit ja nicht brauche. Mir würden 500MB/Sec reichen. Ich brauche keine keine 7000MB/s und mehr
Die Kamera ist für gute Fotos echt das unwichtigste

 

[wern001]

Ich hab hier auch einen größere Datenmenge.
Statt so einem NAS hab ich mir einen Fileserver gebaut mit einem Adaptec SmardRAID. Da sind aktuell 1x RAID5 mit 8x 8 TB und 1x RAID5 mit 8x16 TB sowie 2x 500 GB SSD als RAID0 für SSD-Cache und 1x Raid1 für Betriebssystem. Der Server befeuert 2x 10 GB-LAN. Das Ding steht im Keller und lärm ist ohne Bedeutung.

Ob die Bilder jetzt auf dem Localen ober Netzlaufwerk ist ist für Lightroom kein merkbarer Geschwindigkeit unterschied solange der Katalog auf der localen SSD ist.

 

[DJMadMax]

2x4TB für 300 oder 1x8TB für 900 kostet 3mal so viel. Halte ich für absurd vorallem wenn ich die mehr Geschwindkeit ja nicht brauche.

Es sind 1,5x so viel, nicht 3x so viel. Davon abgesehen: wieso kauft man sich SSDs, wenn man den Geschwindigkeitsvorteil gegenüber HDDs nicht braucht? Das ist doch der Grund schlechthin (neben Geräuschentwicklung), der für eine SSD spricht.

Ergänzung (30. Juli 2023)

Das Ding steht im Keller und lärm ist ohne Bedeutung.

Und Strom auch

 

[schneup]

Du meinst wohl ein NAS mit HDD?

Nope. Heutige NAS haben sowohl mit SSD bestuechkbare SATA Bays wie M.2 NVMe Slots und unterstuetzen SSD Funktionen wie TRIM. Im von mir weiter oben verlinkten Beispiel mit dem AS6706T kannst Du z.B. 6x SATA SSDs und 4x M.2 NVME verbauen. QNAP und Synology haben vergleichbare Modelle im Angebot.

 

[wern001]

Und Strom auch

Da ich damit Geld verdiene, spielt der Stromverbrauch zwar keine unbedeutende aber eine untergeordnete Rolle.
Meine Kamera macht jpg und raw gleichzeitig. Das Kopieren von mehreren GB auf den Server geht mit max speed was die SD- und CF-Karte gleichzeitig her gibt.
Auch das laden von tif dateien in der größe von 600-800 mb geht in Photoshop recht fix

 

[photom]

Es sind 1,5x so viel, nicht 3x so viel. Davon abgesehen: wieso kauft man sich SSDs, wenn man den Geschwindigkeitsvorteil gegenüber HDDs nicht braucht? Das ist doch der Grund schlechthin (neben Geräuschentwicklung), der für eine SSD spricht.

Ergänzung (30. Juli 2023)

Und Strom auch

hallo. nein 3mal. Habe 150eu Brutto für 1 Stück 4TB SSD bezahlt.
Bei HDD sind die Zugriffszeiten (wenn man einen Ordner aufmacht und bilder als Vorschau sehen will) einfach wirklich sehr schlecht. Da ist selbst eine langsame SSD um welten besser.

Ergänzung (30. Juli 2023)

Ich hab hier auch einen größere Datenmenge.
Statt so einem NAS hab ich mir einen Fileserver gebaut mit einem Adaptec SmardRAID. Da sind aktuell 1x RAID5 mit 8x 8 TB und 1x RAID5 mit 8x16 TB sowie 2x 500 GB SSD als RAID0 für SSD-Cache und 1x Raid1 für Betriebssystem. Der Server befeuert 2x 10 GB-LAN. Das Ding steht im Keller und lärm ist ohne Bedeutung.

Ob die Bilder jetzt auf dem Localen ober Netzlaufwerk ist ist für Lightroom kein merkbarer Geschwindigkeit unterschied solange der Katalog auf der localen SSD ist.

Hallo, du hast aber viele danten
Verwende nicht wirklich viel Lightroom. Das mit dem Katalog ist mir natürlich klar

 

[wern001]

Hallo, du hast aber viele danten
Verwende nicht wirklich viel Lightroom. Das mit dem Katalog ist mir natürlich klar

ich verwende das Ding beruflich und privat gleichzeitig. Aktuell ist das große Raid mit ca 50% belegt.

 

[DJMadMax]

hallo. nein 3mal. Habe 150eu Brutto für 1 Stück 4TB SSD bezahlt.

Ah, sorry - ich dachte, du meintest die 300 Euro "pro" 4 TB SSD.

 

[zivilist]

@photom
„Bei HDD sind die Zugriffszeiten (wenn man einen Ordner aufmacht und bilder als Vorschau sehen will) einfach wirklich sehr schlecht. Da ist selbst eine langsame SSD um welten besser.“

Liegt aber auch daran wieviele Dateien in einem Ordner sind. 20000 oder 1000 oder weniger: hier wirst du einen Unterschied feststellen.

 

[DJMadMax]

Um nochmal Butter bei die Fische zu bekommen -> ich habe mir das Bild in deinem Startposting noch einmal angeschaut und ohne jetzt in die Specs des 9700K und des Z390-Chipsatzes zu schauen, würde ich blind behaupten: du hast dich selbst "erwürgt".

Was ich damit meine: du belegst mehr PCIe-Lanes durch deine verbauten Endgeräte, als Mainboard und Prozessor zur Verfügung stellen können. Folglich brechen diverse Glieder der Kette unter Last direkt zusammen und werden nur noch mit dem langsamsten möglichen Durchsatz bedient. (EDIT: Langsamst-möglich ... blöd ausgedrückt, ich hoffe, es wird richtig verstanden: eben nur noch eine PCIe-Lane wird freigeschaltet, eine andere dafür abgeschaltet und das geschieht stets im Wechsel).

Dafür spricht auch, dass du die jeweiligen SSDs einzeln mit höherem Speed betreiben kannst.

Ich rate dir an dieser Stelle erneut zu einem Umdenken, das leider nicht ohne gewisse, finanzielle Aufwendungen zu bewerkstelligen sein wird:

1. Neuer PC mit Workstation-Charakteristik
2. System-SSD + (optional: separate) Arbeits-SSD (beides gern als RAID1 zur Ausfallsicherheit,).
3. Gute, aber günstige SATA-SSDs in ein externes NAS als RAID5

Die Vorteile:

• Der PC läuft zu jeder Zeit absolut performant und ist zudem wieder "up to date"
• Du musst den PC nicht stets und ständig laufen lassen
• Du kannst (deutlich einfacher) verschiedene Freigabe-Ebenen konfigurieren und die Daten nicht nur für dich, sondern nach Wahl auch für viele andere Benutzergruppen zur Verfügung stellen
• Du sparst deutlich Strom gegenüber einem permanent am Netz laufenden PC

Ergänzung (30. Juli 2023)

Liegt aber auch daran wieviele Dateien in einem Ordner sind. 20000 oder 1000 oder weniger: hier wirst du einen Unterschied feststellen.

Auch daran, wie die Festplatten laufen. Im Standby, also wenn die Platter aufhören zu drehen, dauert es selbstverständlich, bis die Platter wieder in Schwung kommen.

 

[photom]

Ah, sorry - ich dachte, du meintest die 300 Euro "pro" 4 TB SSD.

hallo. dann hätte ich nicht 3mal so viel geschrieben hehe
Das heisst dass ich jetzt mal entweder die 2 Neuen 4TB m.2 entweder extern betreibe (da geht bis zu 900MB/s was für mich vollkommen ausreicht) oder ich die zurückschicke und noch eine 8TB Sata SSD kaufe. (sehr ungern da die 8TB nach 80GB nur noch mit 160MB/sec geht)
Wenn ich mir dann einen neuen Rechner hole dann wohl einen AMD mit mehr Lanes oder?

 

[zivilist]

@DJMadMax
Mein Reden: ein 5 Jahre alter Rechner (zumindest CPU und somit auch entsprechend alter Chipsatz) sollte langsam mal erneuert werden.

 

[TriceO]

Wie läuft das überhaupt? Der 9700K hat 16 PCIe Lanes. Alles andere geht über die 4 Lanes des DMI.
Vielleicht wäre es besser, die Grafikkarte auf 8x zu drosseln und einen größeren Adapter in einen der PCIe x16 Slots zu stecken.

https://geizhals.de/asus-hyper-m-2-x16-card-v2-90mc06p0-m0eay0-a2267663.html?hloc=de

 

[Lee Monade]

Wie wäre es wenn man einfach auf einen passenden Computer setzt?
Der Intel hat doch gar nicht genug Lanes, kein Wunder das es dort arge Probleme gibt.
Genau für solche Dinge gibt es doch den AMD Threadripper mit einem passenden Board kann man ohne Ende SSDs einbauen egal ob m.2, Sata oder SAS.

 

[photom]

--So vermeidet man Vollzitate--

mich wundert dass es überhaupt noch läuft haha. Ja die karte wäre toll, leider kann mein PC keine PCIe bifurcation

Ergänzung (30. Juli 2023)

--So vermeidet man Vollzitate--

habe auf eine Lösung gehofft die ohne einen neuen PC auskommt haha na gut
Wenn dann dreht sie sich eh immer und geht nie schlafen...weil diese paar sekunden warten bis es losrennt in denen alles friert hasse ich wie die pest hehe

 

[TriceO]

Wie wäre denn sowas sonst?

https://geizhals.de/asustor-fs6706t-flashstor-6-a2949025.html?hloc=de
https://geizhals.de/qnap-nasbook-tbs-464-8g-a2625709.html

Sind zwar nur 2,5 GBit, sprich 300MB/s, aber vielleicht ist das etwas eleganter, als nun mit externen USB-Gehäusen zu arbeiten.

Kostet aber natürlich. Und für die Kosten gibt es größere SSDs.
Das wäre dann eher eine strategische Frage für die Zukunft, ob man seine Daten in ein NAS/DAS auslagert.

 

[K-551]

Ich habe jetzt hier nicht alles gelesen, aber:

Ich arbeite auch für einen Fotografen und wir haben auch die Probleme.

Währe für dich nicht ein NAS/Fileserver die bessere Lösung?

 

[Beefsupreme]

https://geizhals.de/delock-adapter-...e-horizontal-2242-63918-a1940398.html?hloc=de

vielleicht wäre das was

 

[photom]

Oha...

https://geizhals.de/delock-adapter-...e-horizontal-2242-63918-a1940398.html?hloc=de

vielleicht wäre das was

das wäre natürlich super in Kombination mit der https://geizhals.at/samsung-oem-dat...36tb-mzql215thbla-00a07-a2785342.html?hloc=at
Leider kann ich die meisten M.2 nicht mehr zurückschicken...aber ich könnte die ja verkaufen...wäre auch eine Überlegung wert.