100TB Server - Raid?

Ist hier ein Raid-System noch sinnvoll? Evtl ein Raid 6?

Zum Vergrößern anklicken....

Mindestens RAID6 wäre (meistens) sinnvoll.

Oder führt hier kein Weg an einer vollständigen Spiegelung vorbei, damit die Daten im Falle eines Ausfalls sicher sind?

Zum Vergrößern anklicken....

Das sowieso. Als Alternative zur Plattenspiegeleung könnte man sich auch noch ein Tape-Gerät überlegen

Damit würden sich die Investitionskosten zunächst einmalig auf etwa 4-5k belaufen.

Zum Vergrößern anklicken....

Glaube nicht dass das so günstig kommt, ein 16 Bay NAS von Qnap kostet ohne HDDs schon um die 4K (Version mit i3 und ohne ECC RAM, die mit E3 Xeon und ECC RAM kostet 7.5K) , mit 16 HDDs (Annahme 3 TB, WD Red zu je 115 Euro, mit Raid 6 wären das 42 TB die bereitstehen) macht weitere 2K.
Der Installationsaufwand ist da noch nicht eingerechnet. Wenn Du da bei der "Basiseinheit" sparst wird sich das später rächen, denke das wird Dir dann auch nix bringen wenn nur noch ein- oder zweistellige MB Zahlen durchs Netz fliessen.
Apropos: Habt Ihr überhaupt die Netzwerk-Infrastruktur um sowas performant abzuhandeln, es ist recht supotimal wenn nur gerade einfache GBit Geschwindigkeit für ein Topf mit 100 TB bereitsteht, in dieser Klasse kann man schon über 10 GbE (beim Qnap als Dual Port Karte nachrüstbar) nachdenken.

Bitte nicht wieder mit IT-Dienstleistern kommen, dass ist finanziell einfach nicht drinnen

Zum Vergrößern anklicken....

Wenn Du unbedingt der "Experte" sein willst der dann den Kopf hinhalten will wenn was schiefgeht kein Problem.

Ein Dienstleister ist einfach nicht machbar, ist das so schwer zu verstehen. Wenn es gehen würde, würden wir das schon machen. Man empfiehlt jemanden, der sich nach einem günstigen Auto erkundigt auch keinen BMW5er mit der Begründung das er besser ist.

Ja, evtl auch erstmal nur 12 Slots, das kostet mit 12 Slots 3300€ in der schnellsten Ausstattung für KMU. Muss noch geklärt werden. Die Platten haben wir bereits und die Expansionseinheit kostet später auch jeweils 3000€ - später, wenn wir sie brauchen.

Ja das netz ist stark genug, es fehlt uns nur an Speicherplatz

Ja musst Du selber wissen, wir können Dir nur Tipps geben, umsetzen und hinter dem Projekt stehen musst Du selbst.

Es wirkt auf jeden Fall sehr komisch: Zuerst 100 TB, dann doch nur noch 40 TB und das alles möglichst darf nichts kosten; bei solchen Datenmengen an der Hardware zu sparen ist einfach der komplett falsche Ansatz und wird sich früher oder später rächen.
Es bringt nichts wenn Du jetzt bei der Basiseinheit möglichst günstig fährst und die CPU und der RAM danach für den weiteren Ausbau hoffnungslos überfordert ist und m.M.n gehört in dieser Dimension einfach ein Server CPU (Xeon in dem Fall), ECC RAM und 10 GbE (in Dual Port Ausführung) dazu, alles andere ist Gebastel. Vielleicht können ja dann noch einer der Storage & Raid Profis hier aus dem Forum was dazu schreiben

Die 100 TB sind weiter ein Ziel, sie müssen aber nicht sofort komplett da sein. Wenn man nach und nach auf 100TB aufstocken kann reicht das auch. (Z.B. wie es QNAP ermöglicht)

Gibt es denn eine Möglichkeit mehrere NAS Server zu einem großen zu machen? Also wegen des Backup-Servers.

Bitte immer Bedenken das das kein Server werden soll auf dem gleichzeitig etliche Mitarbeiter etwas machen, wenns hochkommt arbeiten zeitglich zwei damit, im Extremfall mal 4 (mehr haben auch gar nicht Zugriff drauf).

MisterJ0n3s schrieb:

Jedoch soll der Spaß auch nicht zu teuer werden, sodass z.b. 2x 50.000€ Server auf keinen Fall machbar wären.

Zum Vergrößern anklicken....

Keine Sorge, diese Summe kann locker überboten werden.

Jemand, der ein 100TB NAS baut, ist imho nicht mehr ganz fröhlich. Entweder, man greift mit vielen Clients ständig auf die Daten zu, dann braucht man leistungsfähige Hardware, und noch mehr leistungsfähige Hardware, oder aber man nutzt soetwas zu Hause, dann sollte man dies eher mit nearline-medien und einer guten Verwaltung selbiger realisieren.

Im normalfalle wären 100TB netto mal gut das 5-fache an brutto-kapazität (zu Kosten, die ein Vielfaches der Preise für Heimanwender-Platten wären), da man meist eine ganze Baumstruktur an miteinander verschachtelten Systemen aufbaut, die dann jeweils einen Teil der Daten, einen Teil der Fehlerkorrekturinformationen und die Fehlerkorrekturinformationen der Fehlerkorrekturinformationen speichern. Dieses SAN wird dann nochmals in eine (mehrfach redundante) Einheit gespeist, die die zig verteilten Targets zu einem großen blockdevice zusammenfügt und verwaltet, et voilà: 100TB und eine Stromrechnung, für die man sich auch einen etwas leistungsfähigeren Sportwagen kaufen könnte und manche sogar ein Haus.

Ich wiederhole außerdem noch einmal die Worte meiner Vorredner: Ein RAID ist keine Backuplösung. Ein RAID versucht nur die Verfügbarkeit der Daten sicherzustellen. Selbst mit einem zig-fach geschachtelten RAID muß man eine Backupstrategie erarbeiten und regelmäßige Backups durchführen. Überleg mal, was ein LTO4-Laufwerk kostet, dann denke nochmals über Deine 2x50k€ nach. Von den Kosten für eine NEA will ich gar nicht erst reden. Aber immerhin spart's Heizkosten im Winter.

Wie meine Vorredner bereits sagten: Nichts für ein Forum, nichts für Laien.

Man empfiehlt jemanden, der sich nach einem günstigen Auto erkundigt auch keinen BMW5er mit der Begründung das er besser ist.

Zum Vergrößern anklicken....

Man empfiehlt aber jemandem der aus Kostengründen die Sicherheitsgurte weglassen möchte sich das nochmal gründlich zu überlegen.

Wenn deine Firma es überlebt wenn die Daten morgen plötzlich alle weg sind ist das ja kein Problem. Die Erfahrung zeigt aber das es dieses Szenario einfach nicht gibt.

Statistik lässt sich nicht austricksen:
- RAID*Mathematik*für*Admins (speziell die Seiten 16-21)
- some RAID applications for probability.

Ravenier schrieb:

troll...

hardware für 100.000€
1 post
angemeldet seit 10 sec.

Zum Vergrößern anklicken....

Vor 4-6 Jahren vielleicht. Heute kann man ein 100TB NAS in der Region um 8-10k€ bauen.
Natürlich dann noch nichts wirklich "amtliches" aber doch auch schon im produktiven Betrieb halbwegs guten Gewissens nutzbar.
Rein theoretisch kommt man auch mit ~4k€ auf die Speichermenge (was dann allerdings 4-5 Notdürftigsten Grundrechnern mit Platten-Vollbestückung zusammengeschaltet entspricht). Der reine Speicher von 100TB an Platten ist heute bereits für ~2,6k€ VK zu bekommen.

Mein 10TB NAS lag in der Anschaffung um 360€ (~80€ Zyxel NSA-325 NAS +2x3TB zu je 80€ und einer 4TB zu 120€). Selbst das Teilchen funktioniert seit geraumer Zeit zuverlässig und mit guter Geschwindigkeit um 80MB/sek. (wenn auch ohne Redundanz).

Natürlich kann man sich 100TB auch durch Spiegelungen, zusätzliche Bandsicherung, 1h Supportreaktion (auch am WE und Feiertagen) usw. usw. jenseits der 100k€ kosten lassen. Die angesagte Zielsetzung hier war jedoch -> möglichst günstig.

dichta schrieb:

nicht troll nur entweder illegaler filesharer = nicht erwünscht, oder Professioneller einsatz = nicht erwünscht bitte in entsprechendes Systemhaus gehen....

Zum Vergrößern anklicken....

Sind wir hier bei "wünsch Dir was"? Manchmal muss ich mich wirklich wundern......

Bist du sicher daß du nicht 1000TB meinst? 100TB ist doch ein Furz heutzutage.

Man kann entsprechende Hardware sehr günstig bekommen... bei Hetzner bekommt man einen Server mit 15*4TB für läppische 300€ im Monat und das ist mit RZ-Anbindung, Strom, 24/7 Plattentauschservice, 50TB Inklusivtraffic, ... Nicht so lange her da hat man für das Geld gerade mal eine Visitenkartenwebseite bekommen, so ungefähr. Zwei davon und deine 100TB sind paletti, dummerweise musst du dann halt alles durchs Internet quetschen - wobei das je nach Homeoffice auch ein Vorteil sein kann. Ehe du dir für 50k€ einen Kasten mit Folgekosten aufschwatzen läßt hast du da doch für Jahre ausgesorgt...

Auch Backblaze ist doch ein sehr schön gemachtes Beispiel dafür wie sich ein Plattendatenlager günstig realisieren läßt. Die bauen das in Serie, stopfen ganze RZ damit voll, und bieten dann für 5 Dollar unbegrenzten Speicherplatz und das rentiert sich auch noch... billiger geht das doch fast gar nicht, es sei denn du nimmst lose Platten und ein Sharkoon Quickport...

Aber mal von der Hardware ganz abgesehen, es muß jemand da sein der sich richtig gut damit auskennt und dafür sorgt daß die Daten nicht den Abflug machen. Da kannst du noch so teure Hardware haben, wenn sich niemand drum kümmert geht es halt ein. Du kannst ja nicht einfach RAID und Backup machen, und hoffen daß im Zweifelsfall dann schon noch was auffindbar sein wird... wenn das nicht überwacht wird stellst du dann womöglich einfach nur fest, daß der Backupprozess die letzten zwei Jahre gar nicht lief.

Viel Erfolg

Sach mal warum grabt ihr denn Posts von vor acht Monaten aus...?^^ Der Ersteller des Threads hat sich eh nicht wieder gemeldet.

weil ich nicht aufs datum jekuckt habe und der thread jaaanz weit oben stand -.-