Mediaserver für >= 24 HDD´s

[frank99]

Hallo,

ich möchte mir einen neuen Server zusammenstellen der zunächst nur als Mediaserver dienen soll.
Hier ein paar Info´s:

- der Server wird zumindest zunächst, niemals "durchlaufen", Stromverbrauch ist daher nicht wirklich wichtig
- Gehäuse: Lian Li PC-V343B http://geizhals.at/deutschland/301329 (bereits vorhanden)
- zunächst geplant mindestens 24x 2 TB HDDs (bereits vorhanden)
- 6x Sunnytek/Jou Jye ST-3141SS schwarz, SAS/SATA II Wechselrahmen (teilweise bereits vorhanden)
- kein Raid erwünscht zunächst
- die Daten Platten werden manuell zugeschaltet über die Wechselrahmen, mehr wie 4x bis 5x werden niemals zusammen in Betrieb sein
- zur Datensicherung dient später ein "Zwillingsserver", zu fast allen HDD´s gibt es bereits eine "Backup" HDD
Die Daten sind fast statisch und ändern sich nie bzw. sehr selten
wenn die HDD Preise wieder ein vernünftiges Niveau erreicht haben, werden die noch fehlenden HDDs angeschafft
- sehr leistunfsfähig CPU, viel RAM
- OS: zunächst Windows Home Server oder Windows 7

Zukünftig geplant:
- ESXi
- 6x bis 8x weitere HDDs intern als Raid5/6
- mehr HDD´s in exernem Gehäuse(n) eSATA/USB3/SAS
- Umstieg auf Linux als Server OS
- ...

Vorhanden:
Gehäuse, HDD´s, SSD fürs Betriebssystem, Wechselrahmen vorhanden bzw. die restlichen bestellt

Mainboard:
ASUS P8B WS, Intel C206 (B3) (Sockel-1155, dual PC3-10667U DDR3) (90-MSVDI0-G0UAY00Z) http://geizhals.at/deutschland/623306

CPU:
Intel Xeon E3-1245, 4x 3.30GHz, Sockel-1155, boxed (BX80623E31245) http://geizhals.at/deutschland/615488
Xeon wegen Hyper-Threading

Grafik:
Onboard mit Xeon
Btw. erhält man mit einem einfachem DVI nach HDMI Adapter auch Audio auf einem TV?

RAM:
1x Kingston ValueRAM DIMM Kit 16GB PC3-10667U CL9-9-9-24 (DDR3-1333) (KVR1333D3N9HK4/16G) http://geizhals.at/deutschland/709479
4x 4GB Module • 1.50V • lebenslange Herstellergarantie
Aufpreis für Speicher mit ECC ist mir zu hoch, entweder der RAM läuft stabil oder eben nicht, gibt ja memtesr ;-)

CPU Kühler:
Scythe Mugen 3 Rev. B http://geizhals.at/deutschland/709844


ab hier kenne ich mich nicht mehr so wirklich aus

SATA/SAS Controller

HP Smart Array SAS Expander Card (468406-B21), PCIe x4
http://geizhals.at/deutschland/514339
8 interne Ports & 1 externer, davon werden wohl bis zu 2 interne oder 1 externer für die Verbindung mit einem Raid Controller benötigt?

Controller:
HP Smart Array P411/512 mit BBU, PCIe x8 (462832-B21)
http://geizhals.at/deutschland/427928

Kabel für SAS/SATA zur Verbindung zwischen Expander und Raid Controller
DeLOCK mini SAS x4 (SFF-8088) Kabel, 1m (83061) http://geizhals.at/deutschland/428824
oder besser intern mit 2 Kabeln wegen höherer Speed verbinden?
z.b. das hier LSI 3ware mini SAS x4 (SFF-8087) Kabel, 0.5m http://geizhals.at/deutschland/297743

sowie 6x
LSI 3ware mini SAS x4 (SFF-8087) auf 4x SATA Kabel, 0.6m http://geizhals.at/deutschland/297773

Netzteil:
ein neues 450 Watt beQuit wäre noch vorhanden das dürfte zunächst reichen wenn nicht zuviele HDDs eingeschaltet würden?
Bzw. wie hoch sollte es für den Worst-Case dimensioniert sein?
Welches würdet ihr empfehlen?

Gruß,
Frank

 

[Sebbl2k]

ein ganzer Haufen Infos...

24 x 2 TB ist natürlich ein ganzer haufen Holz... ob ich das in einem einzigen Server belassen würde?!...

Wofür so eine Leistungsfähige CPU+RAM wenn eh nur 4-5 Platten laufen sollen zudem ohne Raid..

Für ESXi würde ich eine seperates System bauen.. ich würde an dem Teil, wenn es steht... nichts, rein gar nichts machen außer Daten lagern.. auch würde ich es komplett vom Internet hängen.

Windows Home Server 2011 lässt sich komischerweise erst auf eine Festplatte ab 160gb installieren... ist die SSD so groß?

Den Wechselrahmen kann man wohl nicht ein und ausschalten.. wie willst du das dann Manuell umstellen? Ist das nicht lästig?!

Läuft der HP-Smart überhaupt auf dem Mainboard? Da würde ich mich mal informieren...
Der zweite Controller scheint ein externer zu sein...

Ich nutze in einem meiner nas einen Dell Perc 5i... kannst auch 6i nehmen, läuft aber auch nicht auf jedem Board.. auf meinem problemlos und ich bin sehr zufrieden...

Grundsätzlich werden die Controller doch ziemlich heiss ohne aktiven Lüfter (meist auch wenn sie gar nicht unter last sind)... deshalb empfiehlt es sich bei den geringen Abständen der PCIe Slots aktive Lüfter direkt nachzurüsten oder direkt vor den Karten mit nem 140er Lüfter etc. für Wirbel zu sorgen...

Von bequiet halte ich ehrlich gesagt nichts... die hatten Streckenweise echt schlechte Fertiger... an meine Platten kommen die Teil zumindest nicht.

Für WorstCase... mit Xeon, Lüfter etc.. 24 x 8 = 192 + ~ 100 Xeon + Diverses 100 Watt.. ja, nen gutes 450er sollte es schon sein..

Ich an deiner Stelle würde mir ne Serverfarm mit n40L hinstellen... einrichten mit WHS 2011 geht fast von allein... 5 Platten bekommst du gut rein.. ich hab 6 drin.. macht gute 5 Server... bei 24 Platten.. mit WHS kosten die gut 1000€. Das System schrabbt mit 5 Platten @ Raid5 an der Gbit-Grenze...

 

[Skynet7]

Nabend,

Nee also bis auf das Case würde ich nix von den Komponenten für daheim verwenden. Was willst du denn mit dem Server anstellen? So wie sich das ganze liest scheinst du dafür jedenfalls keinen Xeon mit 16GB Ram zu benötigen. Da ich grad keine Zeit habe lass ich dir einen anregenden link da. Vlt. kann ich dir ja damit weiterhelfen.

 

[denno^]

Whs 2011 läuft auch auf kleineren ssd's. Man kann sich da mit einer dll behelfen die man während der Installation auf einem USB Stick verbunden haben muss. Der home Server Blog hilft bei whs fragen recht gut.

 

[charly76]

Windows Home Server 2011 lässt sich komischerweise erst auf eine Festplatte ab 160gb installieren... ist die SSD so groß?

Das kann man durch ändern einer Datei umgehen.

Der Home Server 2011 ist vom Preis her ein Schnäppchen. Für 37€ ein Betriebssystem...

Habe ich auch im Einsatz. Hauptsächlich für die Datensicherung von 3 Clients und als Datenspeicher für Videos, Musik, Bilder. Bei mir sind 6 Platten verbaut, plus 2x Externe als Backup für den Server. Jeweils eine externe lieht bei Schwiegereltern. Falls das Haus mal abbrennt Möchte nicht die Bilder / Videos von unserem Nachwuchs verlieren.

Habe meine komplette CD Sammlung und ein paar DVDs Digitalisiert. Am Fernseher sehe ich mir die Daten per HDI Dune HD Smart B1 an, aber erst seit einer Wocher. Vorher per PS3.

EDIT: Der Server aus meiner Signatur ist nicht mehr aktuell.

 

[miwob]

ein ganzer Haufen Infos...
Für WorstCase... mit Xeon, Lüfter etc.. 24 x 8 = 192 + ~ 100 Xeon + Diverses 100 Watt.. ja, nen gutes 450er sollte es schon sein..

Bei sovielen Platten sollte man auch an den Anlaufstrom denken. Der beträgt zwischen 1 und 2 Ampere. Bei der Spinpoint F4 sind es beispielsweise 2 Ampere, und demenstprechend 24 Watt Verbrauch im Anlauf _pro_ Festplatte. Sprich, je nach Modell sind das ein Peak von bis zu 576 Watt lediglich für deine 24 Festplatten. Sollte man also nicht vergessen, zu schauen, was das Netzteil kurzfristig unter Überlast leisten kann.

 

[Tekkno_Frank]

@ettan, never ask! Geht DIch und mich absolut nichts an wofür er das benutzt!

@topic:

1) Ich geh mal davon aus, dass das keine Fake Frage ist!
2) Du nicht nur angeben willst!

--> Das macht so keinen Sinn!
--> HP Controller sind noch wählerischer als die PERCs wenn Sie auf NICHT HP Hardwrae laufen sollen tun Sie das meist gar nicht
--> Ein Raid Controller wird mit einem SAS/ SATA Expander verbunden der dann die Anschlüsse schlicht verteilt und so vervielfacht
--> Raid Controller, speziell diese genannten MÜSSEN aktiv gekühlt werden, in Servern herscht fast schon Sturm!
--> Ohne den realen Zweck des Servers ist eine Aussage sehr schwer: Wenn er tatsächlich NUR als Dateiablage für Medien dienen soll ist er völlig overpowered! Willst DU das Teil wirklich direkt an den TV hängen?
--> Ich selbst benutze ARECA Raidcontroller für meine Server
--> HDDS brauchen zwischen 4 und 10 Watt im Betrieb, beim anfahren wesentlich mehr, daher können die guten Raidcontroller auch staggered spinup = zeitversetztes anfahren der Platten, also nacheinander. So werden Spitzenbelastungen vemieden.
--> ECC ist nicht dafür da, dass es geht oder nicht geht, das hat nix mit memtest zu tun!
--> Vergiss Windows Home Server!
--> Netzteil reicht für den Anfang, was gibt das auf den SChienen her? Post mal die Specs.
--> Ich selbst habe ein SS 560Watt und schon bedenkene wenn meine 10 HDDS laufen! Ja die werden nacheinenader angefahren!
--> Die Käfige habe ich auch, leise sind die aber sicher nicht.
--> Welche HDDS werden eingesetzt? 4k Problematik bekannt?

 

[Sebbl2k]

ja... anlaufstrom... der N40L mit WHS lässt die platten alle einzeln nacheinander hochfahren.. auch mein perc mit whs... neuere os/controller sollten den anlaufstrom beherzigen..

@ tekkno frank

also mit WHS 2011 bin ich bisher sehr sehr zufrieden... in der firma läuft das teil seit 3400 stunden am stück und beherbergt mittlerweile 5,1 millionen dateien (sw-raid5).. auch die täglichen backups einiger geräte laufen absolut unproblematisch durch...

auch ist ein degraded raid kein problem und die kinderleichte einrichtung ein schmaus...

auch als druckerserver bringt das teil einige interessante features mit...

 

[AT3TB]

Hallo

Is ja ein ganz schönes Gerät
Aber würde beim Speicher nicht wegen 40€ Sparen bei so einen SYSTEM
Auszug von ASUS HP beim MoBo
* Non-ECC, Un-buffered memory only support for client OS (Windows7,Vista and XP).

Speicher bei Servereinsatz 2x http://geizhals.at/deutschland/638475

Bei den Controllern bin Ich mir auch nicht so sicher Aber HP sachen sind meist ein wenig schwierig
Vorallem bei spezialzubehör wie Expander und so.

Wieso nicht gleich einen Controller mit 24x Ports
http://geizhals.at/deutschland/672505

Netzteil wird am anfang reichen.
Aber bei vollbestückung mit Hdd´s wird warscheindlich eng
Auch is die Temperaturentwicklung bei vielen Hdd´s auf engen raum nicht zu vernachläsigen.

mfg

 

[Tekkno_Frank]

@Sebbl2k
ja dachte ich anfangs auch...., dann lass mal was passieren! Hatten wir. Autsch! Für den Einsatzzweck in kleinen Heimnetzwerken absolut genial, dafür ist er gedacht.

@AT3TB, der iNTEL ist aber ein Expander! Kein Raidcontroller!

 

[AT3TB]

UPS zu schnell gelesen

 

[Humptidumpti]

Also Leute macht euch um den Anlaufstrom mal keine Gedanken. Da wird überschätzt wie der ein NT belastet. Ich starte 15 Festplatten mit nem 300W NT gleichzeitig. Vorher war da ein 250W NoName NT verbaut das rausgeflogen ist weil es einfach hoffnungslos ineffizient war.

Wenn jeweils nur 5-6 Platten laufen kann man die beim Netzteilkauf getrost fast ausser Acht lassen.

@AT3TB
Das ist kein Controller sondern lediglich eine Art Expander.

 

[Tekkno_Frank]

NUr mal so als Ergänzung:

http://www.tomshardware.de/cebit-storagelosungen,testberichte-1405-4.html



Viel Spass beim verkabeln!

KLeiner SCherz! Muss auch mal sein!

 

[charly76]

Es kann mal Probleme beim wiederherstellen eines Clienten geben. Netzwerkkarten Treiber müssen eventuell extra besorgt werden.

Der WHS1 hatte etwas Probleme beim wiederherstellen von 64Bit Clienten.

Ungünstig sind auch die automatischen Serversicherungen, diese dürfen nur 2TB große werden. Mehr geht nicht.

Was ich etwas unschön finde, die Serversicherungen mit den Daten kann ich nicht am normalen PC einlesen, muss dafür einen WHS 2011 am laufen haben. Bin daher erstmal auf ein File Sync umgestiegen. So werden zwar nur die Daten wie Bilder und Co gesichert, aber zur Not setze ich halt den Server neu auf. Wichtig ist mir das ich an die Daten kommen.

Der hat sicherlich auch noch andere Macken.

Als Domainencontroller ging der glaube ich auch nicht. Aber wenn man den Preis mit der nächst kleineren Server Version vom MS vergleicht...

 

[frank99]

Zunächst einmal Danke an alle für eure Antworten.

@Sebbl2k
>Wofür so eine Leistungsfähige CPU+RAM wenn eh nur 4-5 Platten laufen sollen zudem ohne Raid..
Du hast im Prinzip recht, nur die Kiste soll ca. 3 Jahre so laufen und die Anforderungen werden ja nicht geringer ;-)
Und preislich macht das jetzt auch nicht mehr soviel aus.

>Für ESXi würde ich eine seperates System bauen.. ich würde an dem Teil, wenn es steht...
>nichts, rein gar nichts machen außer Daten lagern.. auch würde ich es komplett vom Internet hängen.
Ok, habe nocheinmal nachgedacht macht wahrscheinlich wirklich mehr Sinn die Kiste dann als Fileserver only laufen zu lassen.

>Den Wechselrahmen kann man wohl nicht ein und ausschalten.. wie willst du das dann Manuell umstellen? Ist das nicht lästig?!
Doch man kann jedes Backplane und jede einzelne HDD seperart ein und auschalten.
Siehe hier: http://geizhals.at/deutschland/457150
Lästig ist es ja, aber ich möchte halt nicht die ganze Zeit diesen Server mit allen Platten durchlaufen lassen.

Der Server dient quasi als "Langzeit" Video Archiv, "vorgeschaltet" sind 2 weitere Server darunter ein kleiner HP36L und ein weiterer Server mit knapp 20 HDDs.
Davon der HP36L im Dauerbetrieb.
Befüllt werden die beiden "kleinen" Server mit TV Aufnahmen von überwiegend 3 VDR´s mit vielen Autotimern ;-)
Anschliessend sortiere ich das was mich interessiert oder zur Zeit nicht ansehen kann auf 2. bzw. zukünftig den neuen 3. Server.

>Grundsätzlich werden die Controller doch ziemlich heiss ohne aktiven Lüfter (meist auch wenn sie gar nicht unter last sind)... deshalb empfiehlt es sich bei den geringen Abständen der PCIe Slots aktive Lüfter direkt nachzurüsten oder direkt vor den Karten mit nem 140er Lüfter etc. für Wirbel zu sorgen...
ich hatte vor im Gehäuse weitere 12/14 cm Lüfter intern zu verbauen. Das denke ich ist bei dem Monster kein Problem

>Von bequiet halte ich ehrlich gesagt nichts... die hatten Streckenweise echt schlechte Fertiger... an meine Platten kommen die Teil zumindest nicht.
Ist auch erstmal nur zum Aufbau gedacht, für den säteren Betrieb sollte eh ein etwas grösseres rein.

@Tekkno_Frank
>1) Ich geh mal davon aus, dass das keine Fake Frage ist!
Korrekt.
Ich muss die noch fehlenden Teil noch diese Woche bestellen...

> HP Controller sind noch wählerischer als die PERCs wenn Sie auf NICHT HP Hardwrae laufen sollen tun Sie das meist gar nicht
Ok ich wusste nicht das die scheinbar auf nicht HP Hardware rumzicken.
Ich hatte hier auf dem Board einen Link zu einem Thread hier gefunden:
dhttp://hardforum.com/showthread.php?t=1484614
Das bedeutet ich kann dann wohl nur den Expander nutzen, aber benötige also einen anderen Raid Controller...

Kann jemand einen günstigen von den hier verbliebenen empfehlen?

RAID Adapters
Areca ARC-1880 series: YES (dual linking supported)
Areca ARC-1680 series: YES
IBM M1015 (SAS2008): YES (SAS2008 based card, dual linking supported)
3ware 9690SA Series: YES (verified by SeanG)
Highpoint 4320 SAS: YES (verified by Dgephri)
[B}LSI 9260-8i (SAS2108)[/B]: YES
[B}LSI 9265-8i (SAS2208)[/B]: YES

>Willst DU das Teil wirklich direkt an den TV hängen?
nur optional, der Server steht in einem Nachbar/Abstellraum und ich könnte den mit einem 3 Meter HDMI Kabel erreichen.
Wanddurchbruch ist bereits vorhanden.
Zumindest zum adminstrieren wäre das eine feine Sache.

@ECC
Ok hast ja recht, daran soll es dann auch nicht mehr scheitern.

> Die Käfige habe ich auch, leise sind die aber sicher nicht.
nein, die waren selbst auf leise unerträglich laut. Habe schon teilweise die Lüfter getauscht. Temperatur bleibt im Bereich von ~40 bis 45 Grad

> Welche HDDS werden eingesetzt?
Hitachi Deskstar 5K3000 2000GB, SATA 6Gb/s gross aber recht lahm

> 4k Problematik bekannt?
Gibt’s bei den HDDs nicht.
--> Welche HDDS werden eingesetzt? 4k Problematik bekannt?

@AT3TB
Wieso nicht gleich einen Controller mit 24x Ports
http://geizhals.at/deutschland/672505
Das ist auch nur ein Expander ;-)
War ich auch erst reingefallen siehe hier:
http://www.intel.com/content/www/us/en/servers/raid/raid-controller-res2sv240.html?wapkw=(RES2SV240)

@Tekkno_Frank
http://www.tomshardware.de/cebit-storagelosungen,testberichte-1405-4.html
Deshlab ja SAS ;-)

 

[Basti__1990]

da ich nicht weiß was du mit den knapp 50TB anstellen willst (würde mich echt interessieren ), frag ich dich mal ganz blöd... kannst deine 50TB nicht einfach in der cloud lagern? *indeckunggeh*

Die Daten sind fast statisch und ändern sich nie bzw. sehr selten

das müsste dann noch gehen oder?

 

[frank99]

Ich habe nur kein DSL sondern INET über eine 12 km lange Richtfunkstrecke, und meine 8MBit mit 20 GB Traffic inkl. kostet 65€ pro Monat. Die Flat wäre bei 120€ pro Monat was mir doch zuviel dann ist ;-)

 

[M-X]

@Basti__1990 du musst erstmal 50TB in die "Cloud" bekommen, und ohne 100Mbit/s+(~46 Tage) upload dauert das Monate.
Außerdem musst du 50TB Cloudspace auf Dauer mal bezahlen.

 

[Basti__1990]

klingt für mich, als würdest du ein hochsicherheits-backup in den bergen (sonst wirds mit richtfunk sicher schwer) erstellen
wofür eigentlich 16GB RAM, bei Datenverschiebungen ist der RAM sicher nicht das Nadelöhr, das vollläuft ja ich weiß RAM kostet heute nichts mehr

edit:

@M-X
ich geh mal einfach davon aus, das die 50TB nicht direkt aufeinmal anfallen bzw. schon da sind. der vorteil von der cloud ist ja, dass du eben nur das bezahlst, was du verbrauchst. ist reine kalkulationsproblematik.