DS1019+ Backup to Unraid NAS - Hyper Backup sehr langsam (~10Mb/s)

[Rappi789]

Hallo zusammen,

ich arbeite gerade an einer Lösung für meine komplette DS ein offline Backup zu machen.

Dazu habe ich einen alten PC als Unraid Server aufgesetzt:

Hardware:
DS1019+ Celeron J3455, 8GB RAM, 1GBit Lan mit DSM 6.2.4 (das Backup möchte ich vor dem Update auf DSM7 machen)
Unraid NAS: ZOTAC H67, i3-2105, 4 GiB DDR3, 1GBit Lan

Nachdem ich rsync nun erfolgreich auf Unraid einrichten konnte und nun die ersten Test-Backups mit Hyper Backup durchlaufen gelassen habe, bin ich über die Geschwindigkeiten recht entteuscht.

Über Windows kann ich um die 100Mb/s transferieren. Mit Hyper Backup erreiche ich nach mehreren Stunden testen nur so 10Mb/s.
Nun habe ich online gesehen das Hyper Backup generell recht langsam zu sein scheint, bzw. am Ziehlgerät sehr CPU-lastig ist.

Meine Frage wäre nun:

• Prinzipiell finde ich das simple Handling von Hyper Backup mit Verschlüsselung gut. Würde sich ein Prozessor Upgrade auf irgendeine gebrauchte LGA1155 i7 CPU auszahlen um die Geschwindigkeit zu erhöhen?
• Online habe ich aber auch gesehen, dass seit dem Update auf DSM7 User schreckliche Transfere-Raten von ~1,5Mb/s haben. Bei meinen 16TB wäre das absolut unbrauchbar. Ist das wirklch so oder habe ich da nur ein paar schwarze Schafe erwischt?
• Wenn nicht Hyper Backup, kennt ihr andere Backup Möglichkeiten mit Verschlüsselung?

Vielen Dank für eure Tipps!

 

[Salamimander]

Im ersten Schritt solltest du mal die netzwerkperformance Testen. Wenn die passt kann man weiter gucken

 

[redjack1000]

Würde sich ein Prozessor Upgrade auf irgendeine gebrauchte LGA1155 i7 CPU auszahlen um die Geschwindigkeit zu erhöhen?

Wenn der I3 die Ursache ist, bestimmt.

CU
redjack

 

[maxblank]

Wenn die Hardware-Voraussetzungen passen, kann auch Hyper Backup eine anständige Geschwindigkeit entwickeln. Ich habe erst kürzlich für ein anderes Forum diesbezüglich ausführliche Tests gemacht. Da kamen Datenraten von über 450 MB/s beim Backup zu Stande.

Ich tippe mal auf die schwachen Prozessoren, wenig IOPS bei den Datenträgern oder rsync an sich in der Kombination mit der Hardware.

 

[Rappi789]

Im ersten Schritt solltest du mal die netzwerkperformance Testen. Wenn die passt kann man weiter gucken

Muss ich mir einmal ansehen wie ich das am besten angehe, habe für heute keine Zeit mehr...

Wenn der I3 die Ursache ist, bestimmt.

Woher weiß ich ob der I3 wirklich die Engstelle ist?

Wenn die Hardware-Voraussetzungen

Für Hyper Backup habe ich keine HW-Voraussetzungen gefunden, oder muss ich mich da an etwas anderem orientieren?

Der DS ist (zumindes laut Ressourcen-Monitor) langweilig.
Unraid ist ich schätze mal zu 33% ausgelastet. Den ersten TB habe ich nun mit 10,4Mb/s kopiert (gestern gestartet).

 

[redjack1000]

Woher weiß ich ob der I3 wirklich die Engstelle ist

Aufgund deines Screenshot, denke ich, ist der I3 nicht das Problem.

Cu
redjack

 

[maxblank]

Schalte mal beim NAS auf Volume im Ressourcen-Manager und dort auf die IOPS.
Als Vergleich auch mal die Auslastung des Unraid-Arrays betrachten.

Es gibt keine deklarierten Hardware-Voraussetzungen für Hyper Backup, außer das es das NAS unterstützen muss. Aber irgendwo gibt es einen Engpass bei dir, sonst würdest du nicht mit den paar MB/s rumdümpeln.

 

[alturismo]

und wenn du Unraid nutzt ...

Parity aktiv ? wenn ja, viele "kleinere" Dateien ...
und ist vor allem die Parity Platte eine SMR (nicht gut ...) oder CMR HDD ? ...

das Ganze noch enrypted ... bei vielen kleinen Dateien ... kann schon etwas dauern, zumindest beim "ersten" Sync

 

[Rappi789]

Schalte mal beim NAS auf Volume im Ressourcen-Manager und dort auf die IOPS.
Als Vergleich auch mal die Auslastung des Unraid-Arrays betrachten.

DS Volume Auslastung habe ich angehängt. Wie sehe ich bei Unraid die Auslastung?

Parity aktiv ? wenn ja, viele "kleinere" Dateien ...
und ist vor allem die Parity Platte eine SMR (nicht gut ...) oder CMR HDD ? ...

Parity wurde nach einem Preclear sämtlicher HDDs durchgefürhrt, bevor ich den Transfere gestartet habe. Im Einsatz sind natürlich nur NAS HDDs (WD-Reds siehe Anhang)
Getestet habe ich auch kleine oder Große Datein, hat bei der Geschwindigkeit nichts geändert.

 

[alturismo]

Im Einsatz sind natürlich nur NAS HDDs (WD-Reds siehe Anhang)

ok, dann fällt mir nicht wirklich was Schlaues dazu ein ...

um das Thema Parity mal auszuschließen, teste mal wenn du folgendes bei Unraid auf reconstruct mode stellst

das beschleunigt das Array von Unraid beim Schreiben (erheblich), hat den Nachteil das immer alle Platten beim write laufen und nicht nur die betroffene + parity ... nur zum Cross Test ... wenn das nichts bringt wieder retour stellen ...

ansonsten wäre ich raus, sieht ja fast nach 100 mbit "irgendwo in der Kette" aus ... wovon ich jetzt mal ausgehe dass dies bereits geprüft wurde beispielsweise mit iperf von / zu DS <> Unraid.

ps. falls du in Unraid den disk speed anstelle read / writes sehen möchtest, toggle oben rechts in Main schaltet die Ansicht um

 

[Rappi789]

bei Unraid auf reconstruct mode stellst

hat leider nichts geändert.

iperf

über windows kopiere ich um die 100Mb/s, aber ich kann das mal laufen lassen.
Welchen docker soll ich dafür verwenden? Der Docker Link auf der iperf Download Page ist veraltet und auf mein NAS lade ich ungerne unbekannte Software...

 

[alturismo]

Welchen docker soll ich dafür verwenden? Der Docker Link auf der iperf Download Page ist veraltet und auf mein NAS lade ich ungerne unbekannte Software...

Unraid hat iperf onboard ...

Ergänzung (6. Oktober 2023)

was du bei deinen anderen Geräten machst ... kann ich nicht beantworten

Ergänzung (6. Oktober 2023)

was du bei deinen anderen Geräten machst, kann ich jetzt nicht beantworten ... dafür braucht es normal keinen separaten Docker ...

 

[Rappi789]

Unraid hat iperf onboard ...

gut das schonmal zu wissen, danke. Aber für Synology brauche ich (laut den Youtube Videos zumindest) iperf extra...

 

[alturismo]

Aber für Synology brauche ich (laut den Youtube Videos zumindest) iperf extra...

dann ... einfach je nach Base installieren ...

Beispiel
https://stadt-bremerhaven.de/geschwindigkeit-im-netzwerk-testen-iperf-auf-der-synology-diskstation/

 

[maxblank]

Auslastung der Synology scheint auch im Rahmen zu sein.