Neuer Fileserver, welches Netzteil?

[connorxxl]

Hallo,

ich stelle gerade meinen neuen Fileserver zusammen, und weiss nicht so recht, welches Netzteil ich nehmen soll. Könnt Ihr mir da helfen oder zu etwas raten?

Planung:
- X-Case RM 424 pro
- MB mit einem oder zwei Socket 2011, allerdings keine High-end CPU (E5-1620 oder zwei E5-2620), wahrscheinlich mit Dual 10gb NIC onboard (bei zwei Sockets)
- 64gb RAM
- Aktuell 12 Platten (6 mit 7200rpm, 6 mit 5400rpm), weitere 8-12 Platten geplant (noch nicht sicher, welche rpm, bis Vollausbau). Platten sind Consumer oder NAS Bereich.
- 3 IBM 1015 Kontroller
- Dual Gigabit Ethernet NIC (Intel)
Die CPUs sind etwas überdimensioniert für einen Fileserver, ich will allerdings auch VMs laufen lassen (OmniOS oder so).

Mein aktueller Server startet leider nicht richtig mit 14 Platten (E3-1230) und be quiet 580W, daher möchte ich diesmal auf der richtigen Seite mit dem Netzteil sein.
Laut verschiedener Kalkulationen ende ich bei etwa 1000W (60A), allerdings sehr grobe Kalkulationen. Kommt das hin? Geht ja hauptsächlich um den Start der Platten.
Im Auge habe ich derzeit das Seasonic X-1050 wegen Single Rail auf 12V (da hängen ja die Platten dran). Hat da jemand Erfahrung, insbesondere ob es wirklich Single Rail ist? Alternativ ein Enermax Platimax 1000w.

Vielen Dank für Eure Hilfe.

Chris

PS: Hab mir überlegt, die Anfrage im Netzteilforum zu stellen, da lese ich aber nicht viel von Servern, sondern nur von Grafikkarten etc. Daher vertraue ich da eher Eurer Meinung...

 

[GrafikTreiber]

1000W sind absolut nicht nötig. Du musst bei deinen Controllern einfach nur Staggered Spinup (Festplatten werden nach einander mit einem Delay hochgefahren) einstellen, dann wird dein System auch von deinem aktuellen Netzteil versorgt. Ich habe ein ähnliches System.

be quiet! Dark Power Pro 10 550W ATX 2.31 (P10-550W/BN200) betreibt folgende Komponenten:
Supermicro X9SRL-F
Intel Xeon E5-1620, 4x 3.60GHz
32GB reg ECC CL11 (DDR3-1600)
6x 8-Port-LSI-HBA
24 Festplatten intern, Rest über Expander-Gehäuse, diese haben ihr eigenes Netzteil, be quiet! Straight Power E9 400W ATX 2.31 (E9-400W/BN190) für jeweils 24 Festplatten + LSI Expander.

Ich nutze Debian 7, habe alle Festplatten mit dmcrypt verschlüsselt und nutze ZFSonLinux für mehrere RaidZ3-Pools und ein Mirror.

Verbrauch im "normalen Idle" (rTorrent/jDownloader Downloads und eine Server 2008 R2 VM) mit 22 Festplatten im SpinDown, 2 SpinUp und einer SSD: 150-170W. Im totalen Idle, also wenn man wirklich alle Prozesse beendet und alle Festplatten abschaltet 110-120W.

Die Verbrauchsanzeige meines Strommessgeräts hat noch nie die 375W unter Voll-Last geknackt, selbst das muss ich speziell forcieren in dem ich die Festplatten sinnlos unter Last setze und einen CPU-Burn-In-Test mache, der "normale Lastbetrieb" liegt bei 250W.

Wenn du auf Dual-Socket gehst würde ich zum be quiet! Dark Power Pro 10 650W ATX 2.31 (P10-650W/BN201) greifen.

Bei den genannten Netzteilen kann man auch vom Multi-Rail- in einen Single-Rail-Betrieb wechseln, siehe siehe Herstellerseite:

Overclocking Key ermöglicht den Wechsel zwischen vier unabhängigen +12V Leitungen und einer massiven +12V Leitung

Aber ganz ehrlich: Bist du dir sicher ein Dual-Socket-System zu brauchen? Vergiss nicht dass ein Single-Socket-System viel günstiger ist und du mit dem E5-1620 eine enorme Single-Core-Leistung von 4x 3,6Ghz für nur ca. 270€ bekommst. Bei den günstigsten Dual-Socket-Systemen kommst du an so hohe Single-Thread-Leistungen nicht dran, da sich viele Rechenaufgaben nicht unbedingt parallelisieren lassen wäre bei diesen Aufgaben ein günstiges Dual-Socket-System langsamer als das viel billigere Single-Socket-System.

Zu den 10GBase-Netzwerkkarten: Nimm lieber PCIE-Steckkarten und keinen Onboard-Chip. Die PCIE-Karten kannst du auch noch auf andere Systeme mit nehmen, sei es wenn du ein Upgrade durchführst oder dein Mainboard außerhalb der Garantie defekt ist. Eine 10GBase-Netzwerkarte ist noch mehrere Jahre aktuell, ein Sockel 2011 Mainboard höchsten ein Jahr. 10GBase onboard kann dann also ganz schnell zu totem Kapital werden. Eine 10GBase 2-Port Karte bekommst du ab ca. 300€:
Geizhals.de - Netzwerk LAN/Modems » Netzwerkkarten/-adapter mit Portanzahl: 2x, Porttyp: 10GBase

Das Supermicro X9SRL-F hat 7 PCIE-Slots, du hast dort also genug Platz für mehrere Steckkarten.

Da das Supermicro X9SRL-F 10x SATA onboard hat kannst du dir dort sogar eine LSI HBA sparen und kommst mit zwei Stück aus. Diese SATA-Ports schließt du mittels speziellen Reverse-Breakout Kabeln an die Backplanes an.
LSI 3ware 4x SATA auf mini SAS x4 (SFF-8087) Kabel, 0.6m (CBL-SFF8087OCR-06M)
Das sind spezielle Kabel, die normalen SFF-8087 zu 4x SATA sind für den Anschluss des SFF-8087 Ports an den Controller gedacht, bei Reverse-Breakout Kabeln ist der SFF-8087 Port für den Anschluss an die Backplane gedacht.

 

[hominidae]

Im Auge habe ich derzeit das Seasonic X-1050 wegen Single Rail auf 12V (da hängen ja die Platten dran). Hat da jemand Erfahrung, insbesondere ob es wirklich Single Rail ist? Alternativ ein Enermax Platimax 1000w.

Zum Thema Single-Rail einfach aufs Datenblatt/Typenschild gucken.
Ein Single-Rail hat einen Eintrag bei 12V, z.B. "12V 40A"...ein Dual/Multi-Rail hat für jedes Rail einen eigenen, nummerierten 12Vx-Eintrag, zB "12V1 18A, 12V2 20A".

Ich habe eine ähnliche Konfig wie Grafiktreiber und habe ein 600W 80+ Platinum drin, Super Flower Golden King Pro 600W ATX 2.3 (SF-600P14PE) (semi-passiv) Preisvergleich | Geizhals Deutschland

 

[connorxxl]

Hallo Grafikktreiber, hallo hominidae,

Vielen Dank für Eure Antworten. Den Staggered Spinup habe ich am Anfang mal probiert, leider habe ich das nicht hinbekommen. Ich habe die IBM 1015 auf LSI IT Firmware geflasht, es gab da einen Punkt, wo man sowas einstellen konnte (ich schaue nochmal genau nach), leider hat das nicht funktioniert. Brauche ich da spezielle Festplatten oder Einstellungen? Habt Ihr da Erfahrung mit dem M1015? Werde es nächste Woche nochmal probieren.

Bin mir noch nicht sicher wegen des Dual-Socket Systems, da überlege ich noch. Hab mir ein Board ausgeliehen (X9SCM, E3 1240v2, 32gb RAM), das fast exakt das gleich ist, was ich schon habe, um zu schauen, ob ich wirklich Dual Socket brauche. Werde ja den neuen Server zusätzlich zu meinem ESXi betreiben (kein "All-in-One" mehr für den ESXi), daher auch die 10gb NICs. Habe mir das X9SRL-F schon ausgesucht, falls ich einen Single-Socket Server baue.
Ich will auf dem Server zumindest File Serving, MySQL und SabNZBD laufen lassen, zusätzlich dann noch NewzNab/NZedB und Plex. Das alles frisst schon ordentlich CPU...
Das Dual-Socket Board mit 10gb NICs kostet nur EUR 150 mehr als das ohne, aber Du hast natürlich recht. Werde den Server aber sicher einige Zeit betreiben, daher ist das weniger ein Problem für mich.

Soweit ich mir erinnere, unterstützt Illumos/OmniOS den SCU von Intel nicht, daher werde ich wohl alle drei Adapter brauche, ist aber kein Problem, habe sie ja bereits.

Ist schon mal sehr gut zu wissen, dass ich die 1000W nicht brauche... Die Teile sind echt teuer. Habe mit meinem be quiet Netzteil eigentlich gute Erfahrungen gemacht, werde dann vielleicht einfach wieder bei der Marke zuschlagen, da ich den alten Server ja weiterlaufen lasse...

Nochmals Danke für Eure Hilfe!

 

[screama]

Also ich hab in meinem Fileserver (siehe Signatur) folgendes Netzteil verbaut: Corsair Professional Series HX750 80PLUS Gold 750W ATX 2.31 (CP-9020031-EU) Preisvergleich | Geizhals Deutschland

Staggered-Spinup hab ich bei meinen beiden M1015 auch nich hinbekommen - ist bei mir aber auch noch nicht nötig, da erst 8/16 Platten im Server werkeln. Aber selbst dann sollte das Netzteil das aushalten

 

[GrafikTreiber]

Ich weiß ganz ehrlich nicht was es da groß einzustellen oder "nicht hin zu bekommen" gibt, man geht ins Menü des Controllers und aktiviert die Funktion?!
Ich habe es noch nie erlebt dass das nicht geht. Da braucht man keine speziellen Festplatten oder sonst irgendetwas für.

Da ich meinen Server nur ungern neustarte um Fotos zu machen habe ich mal kurz nach Screenshots gegoogelt, aber leider auf die Schnelle keine passenden gefunden.
Ihr müsst in dieses Menü rein:

Ich meine unter "Advanced Adapter Properties" müsste sich auch ein Punkt mit "Staggered Spinup" oder "SpinUp Delay" finden lassen, kann auch unter einem anderen Punkt sein.
Da kann man dann noch den Delay einstellen, Standard ist glaube ich 2 Sekunden, belasst es einfach mal dabei.

Ich glaube sogar das Staggered SpinUp grundsätzlich sowieso schon angeschaltet ist.
Man hört dass dann auch gleich ganz eindeutig dass die Festplatten sich nacheinander einschalten.

Die meisten Supermicro Mainboards haben in ihrem BIOS auch eine Einstellung für Staggered SpinUp für die Onboard-Controller:


Boot-Support sollte man immer ausschalten wenn man ihn nicht braucht, das beschleunigt den Start-Vorgang immens.

X9SCM ist Sockel 1155, da hast du nur 24 PCIE-Lanes. Könnte also etwas problematisch werden da alle Controller unter zu bekommen, je nach dem wie viele 10GBase-Karten du da vor hast ein zu bauen. Sockel 2011 hat 40 PCIE-Lanes, da ist das kein Problem.

Bist du dir ganz sicher dass Illumos/OmniOS den SCU von Intel nicht unterstützt? Ich kann mir das ehrlich gesagt kaum vorstellen, das ist ein ganz normaler Intel-Controller, das wäre schon ziemlich schwach. Ein Grund mehr Linux einzusetzen.