[Kaufberatung] Finale Beratung zu Promox- und Storage-Server

[Cludch]

Hallo,

ich habe mich in einem anderen Thread bereits beraten lassen und habe nun meinen Build fast fertig konzipiert. Der Server soll als Proxmox- und Storage-Server (ZFS) dienen.
Geplant sind bis zu acht Festplatten an einem HBA und zwei SSDs (RAID 1) an normalen SATA-Ports.

Parts:
Gehäuse: IPC 3U-30255 (2U zu laut)
HDD Cage: (Anfangs nur einen, später einen zweiten) SST FS304
PSU: 450-500W ATX Gold (Vermutlich be quiet oder SeaSonic G Series)
RAM: 16 GB Kingston ValueRAM DDR4-2133 ECC 1.2V
SSD: 2x 500GB 2.5" SSD
Sonstiges: 1x SFF8087

Nun fehlen natürlich noch CPU (+Kühler) und ein Mainboard.
Beim CPU habe ich mir den Xeon E3-1230v5 oder Xeon Silver 4108 ausgesucht, denn es gibt noch verschiedene Mainboards zur Auswahl und ich kann mich nicht ganz entscheiden.

Erstmal die Mainboards:

• X11SSH-CTF
• X11SSL-CF
• X11SPH-nCTPF
• X11SPi-TF

Zum einen will ich meine alte 4-Port Ethernet NIC weiterverwenden. Des Weiteren benötige ich einen HBA. 10GBit wären schön, aber da SFP+ Karten und Switches günstiger sind, kann ich dies auch später nachrüsten, sobald es benötigt wird.
Persönlich gefällt mir das X11SPi-TF am besten, da es genug Ports hat, um einen HBA und später 10GBit nachzurüsten.
Beim X11SSH-CTF hätte ich, glaube ich, nicht genug Ports, um meine NIC PCIe-Karte und ggf. später SFP+ nachzurüsten.
Das X11SPH-nCTPF erscheint mir perfekt, finde aber nichts zum Release bzw. ab wann es erhätlich sein wird.
Das X11SSL-CF ist super, hat aber den 1151-Sockel und ich würde eventuell sogar mit dem Silver gehen wollen.

Thema HBA:
Ich lese viel vom LSI 9211-8i und Dell H310. Der Dell H310 ist günstiger und kann auch in den IT-Mode geflasht werden. Macht es hier einen Unterschied?

Passen die Komponente so? Irgendein Mainboard, welches ausscheidet?
Freue mich über jegliche Hilfe.
Viele Grüße,
Cludch

 

[besterino]

Das X11SPi-TF hat schon 2x10Gbase-T an Bord. Zusammen mit deiner 4 Port NIC (hoffe Intel-based? Realtek mag ESXi nicht) musst Du da netzwerktechnisch m.E. erst einmal nichts mehr nachrüsten - es sei denn du willst zukünftig auf Glas/SFP+.

Hab das SPi ja selbst und kann bisher nicht klagen, allein den CPU-Lüfter muss ich noch irgendwie runterregeln (mit dem ipmitool?), der dreht für die 30 Grad der CPU zu schnell/laut.

 

[Cludch]

Das X11SPi-TF hat schon 2x10Gbase-T an Bord. Zusammen mit deiner 4 Port NIC (hoffe Intel-based? Realtek mag ESXi nicht) musst Du da netzwerktechnisch m.E. erst einmal nichts mehr nachrüsten - es sei denn du willst zukünftig auf Glas/SFP+.

Hab das SPi ja selbst und kann bisher nicht klagen, allein den CPU-Lüfter muss ich noch irgendwie runterregeln (mit dem ipmitool?), der dreht für die 30 Grad der CPU zu schnell/laut.

Die NIC ist Intel-based, ja. Nie wieder Realtek.

SFP+-Hardware ist billiger, oder? (Switches und weitere Karten)

Brauche dann aber noch einen HBA. Geht die Dell H310-Karte dafür oder eine andere?

 

[besterino]

H310, M1015... gibt da viele.

Habe das nie durchgerechnet, schätze schon dass SFP+ bei den Devices (NICs, Switchports) günstiger ist. Wie sich das dann auskommt mit Kabeln (im Zweifel längenabhängig?), Dosen, Modulen (Verschleißteile?) - keine Ahnung.

 

[Cludch]

H310, M1015... gibt da viele.

Habe das nie durchgerechnet, schätze schon dass SFP+ bei den Devices (NICs, Switchports) günstiger ist. Wie sich das dann auskommt mit Kabeln (im Zweifel längenabhängig?), Dosen, Modulen (Verschleißteile?) - keine Ahnung.

Gibt es bei den HBA denn irgendwelche Unterschiede oder eine, die du mir empfehlen könntest?

Gut 10GBit ist ja bei mir auch noch Zukunftsmusik, werde dann wohl sehen, was sich lohnt. (Da alles in einem Rack hausen wird, wäre die Kabellänge (=Preis) nicht so entscheidend).

Vielen Dank, dann wird es das X11SPi-TF.

 

[besterino]

Ich hab hier 2x Dell h200, 1x Dell H310 und 1x Original LSI im Einsatz und merke im alltag null Unterschied. Das merkst Du m.E. auch nur, wenn Du die Dinger ans Limit treibst - was du mit Homeuse-Anwendungen kaum schaffen dürftest. Da limitieren vorher eher die Platten.

SFP+ später Nachrüsten wäre ja auch kein Problem.

Denk an einen CPU Kühler für den 4108 und die Bretter fressen REGISTERED ECC!

 

[Cludch]

Ich hab hier 2x Dell h200, 1x Dell H310 und 1x Original LSI im Einsatz und merke im alltag null Unterschied. Das merkst Du m.E. auch nur, wenn Du die Dinger ans Limit treibst - was du mit Homeuse-Anwendungen kaum schaffen dürftest. Da limitieren vorher eher die Platten.

SFP+ später Nachrüsten wäre ja auch kein Problem.

Denk an einen CPU Kühler für den 4108 und die Bretter fressen REGISTERED ECC!

CPU-Kühler suche ich mal. Und ich schaue mal, ob ich irgendeine günstige Karte finde.

Wusste gar nicht, dass ich regECC brauche. Vielen Dank!!

Edit: Die Kühler-Suche ist doch nicht so einfach. Kannst du einen empfehlen?

 

[Trambahner]

E3-Xeon: immer unregistered ECC, ab E5 (und vergleichbaren neueren): reg ECC.

Bei den Kühlern: Achtung auf normale und Narrow ILM (Breite).

 

[besterino]

CPU-Kühler suche ich mal.
Edit: Die Kühler-Suche ist doch nicht so einfach. Kannst du einen empfehlen?

Einziger mit aktivem Lüfter, den ich vor kurzem gefunden habe und der auch lieferbar ist: Supermicro SNK-P0070APS4

Paar Bilder sind hier: [Bilder+Kommentare] HomeServer-Vorstellungsthread - Seite 79

4U, sollte also in normale PC-Gehäuse passen. Für anständige 19" Rack Gehäuse mit entsprechender Kühlung reicht auch das 2U Heatsink (auch im Post oben zu sehen).

Nachtrag: ich habe absolut KEINE Ahnung, ob Proxmox diese Generation (Silver & Co.) bereits unterstützt. ESXi geht jedenfalls.

 

[Cludch]

E3-Xeon: immer unregistered ECC, ab E5 (und vergleichbaren neueren): reg ECC.

Bei den Kühlern: Achtung auf normale und Narrow ILM (Breite).

Wieder etwas gelernt, danke.

Einziger mit aktivem Lüfter, den ich vor kurzem gefunden habe und der auch lieferbar ist: Supermicro SNK-P0070APS4

Paar Bilder sind hier: [Bilder+Kommentare] HomeServer-Vorstellungsthread - Seite 79

4U, sollte also in normale PC-Gehäuse passen. Für anständige 19" Rack Gehäuse mit entsprechender Kühlung reicht auch das 2U Heatsink (auch im Post oben zu sehen).

Nachtrag: ich habe absolut KEINE Ahnung, ob Proxmox diese Generation (Silver & Co.) bereits unterstützt. ESXi geht jedenfalls.

Da ich ein 3U Gehäuse nehme, wohl der 2U Heatsink.
ESXi habe ich aktuell, will aber eigentlich ZFS benutzen. Die CPU unterstützt aber Intel VT, was könnte ansonsten ausschlaggebend sein für die Kompatibilität?

Noch mal eine andere Frage.
Ich will die beiden SSDs in RAID 1 betreiben, um darauf VMs zu packen. Brauche ich noch eine weitere (kleine) SSD für Proxmox oder läuft das auch auf einem USB-Stick?

 

[besterino]

Bei ESXi mit einem all in one kannst du ja auch alles bis auf ESXi selbst und die Storage-VM auf ZFS legen - just sayin'. Will dir proxmox aber gar nicht ausreden. Im Gegenteil: gab bei heise jüngst einige Artikel, die Lust drauf machen. Werd ich die Tage wohl auch mal installen auf einer Bastelkiste.

 

[Cludch]

@besterino, du musst echt Glück gehabt haben mit deinem Silver 4108 für deinen Preis.
Für den Kurs bekomme ich kaum den Bronze 4108, welcher es wohl erstmal wird.

Habe bisher auch nur mit ESXi gespielt und finde Proxmox super interessant.

 

[besterino]

Jo, der war für ~240 Euro ein Schnapper, keine Frage. Da ich den zusätzlichen Server eigentlich nicht brauchte, muss immer noch entscheiden, was ich nun dafür ausmiste....

Aber die größere Plattform reizte mich schon lange - vorher 2011-3 und jetzt konnte ich nicht mehr widerstehen. Man stelle sich mal vor, was man mit so einem 18Kerne Biest bei 3GHz anstellen könnte: https://ark.intel.com/products/120495/Intel-Xeon-Gold-6154-Processor-24_75M-Cache-3_00-GHz

 

[Cludch]

18 Kerne brauche ich dann wohl auch nicht.
Habe aktuell 4 Cores und 4 Threads und bekomme den selten ausgelastet. Dann wird wohl der Bronze 4108 mit 6C und 6T auch reichen.

 

[besterino]

Der Bronze wäre dann der 3106?

 

[Cludch]

Der Bronze wäre dann der 3106?

Ups. Meinte den 3014.