Moin die Herren!
Die Server von Dell und HP dürften wohl jedem, der in diesem Unterforum unterwegs ist, ein Begriff sein. Von IBM / Lenovo und Supermicro hört man auch noch ab und an.
Von einem Hersteller hört man allerdings so recht wenig: Cisco!
Ich habe vor nicht allzu langer zeit einen Cisco UCS C460 M4 Server erworben, zu dem es im Internet auch nicht so sehr viele Informationen, die nicht von Cisco stammen, zu finden gibt.
Deshalb: Showthread!
Ich habe den Server auf ebay gekauft. Bestückt war er mit 4x Intel Xeon E7-4880 v2, 256GB DDR3-1600 auf 8 Memory Boards (laufen auf 1333MHz), einem PCIe Riser (der wiederum mit zwei Cisco NICs bestückt ist) und 12 Fillern für die SFF Slots.
Ich lasse die Bilder für sich sprechen... Mehr oder weniger.
Unten ist der Cisco Server mit seinen 4 Lüftermodulen zu sehen (Oben ein IBM X3850 X5, den ich von @Tom3 hier aus dem Forum gekauft habe).
Jedes Lüftermodul hat übrigens 50W(!), dreht maximal mit 10500RPM und macht dabei >100dB (kalibriert gemessen, Sone werden demnächst nochmal gemessen).
Hier schön zu sehen: Die 4 redundanten 1400W Netzteile, sowie die 2 Dual SFP+ Cisco NICs
So sah die Kiste ursprünglich aus, als sie angeliefert wurde.
...SFF Slots. 5 + 9 unterstützen auch U.2 SSDs, sagten sie...
Ich hatte zusätzlich, ebenfalls von @Tom3 noch 27* 32GB DDR3-1866 LRDIMM erworben, die ich dann auch eingebaut habe.
Kommen wir zu den Memory Risern und dem Speicherausbau:
Ja, der Speicher ist hot-pluggable, sofern das OS das unterstützt (und die Treiber installiert sind).
Im Fehlerfall teilt einem der Riser auch mit, welches DIMM hops gegangen ist.
Memory Riser vor dem RAM ausbau.
Das ist ein ziemlich massives Teil (ist auch ordentlich schwer!) vollflächiger Alu "Backplate". Schön finde ich ebenfalls die Amphenol Verbinder...
Ein Mal mit dem neuen RAM bestückt.
8 Riser á 4 Riegel á 32GB => 1024GB!
Die Technologie der Riser stammt übrigens von Intel und wird / wurde von mehreren Herstellern genutzt (IBM, Fujitsu, etc)
Kleines Intermezzo: Leistungsaufnahme.
...Benchmark Betrieb, alle 4 Netzteile am Laufen, Grid redundancy. Hängt noch eine 150W Threadripper WS mit dran, zugegebenermaßen. Also 850W.
Noch ein kurzes Intermezzo:
Habe direkt Ersatz CPUs mitgeordert.
...to be continued.
...und jetzt bitte nicht wegen der Antistatikfolie meckern. Ich selbst war geerdet und wollte nur fix Bilder machen.
Weiter geht es mit dem PCIe Riser.
"Original"
Hier sieht man schön die Halter zum Abstützen sowie die 2 Stromanschlüsse.
Sieht im Detail so aus. Schön auch das dicke PCB.
Die Stromkabel von Cisco sind nicht zu kriegen. Da der Kram wie die Dell Server bei Foxconn vom Band fällt und Dell exakt die selben Anschlüsse auf ihren PCIe Risern hat, habe ich einfach mal Dell PCIe Riser Power Cable beim freundlichen Chinesen geordert und hoffe, dass das funktioniert.
Eine der NICs. Schön zu sehen der (mutmaßlich) Extra Management Connector für Original Cisco Hardware, damit man die selbst konfigurieren kann, wenn der Server aus ist und man nur via IMC auf ihn zugreift!
Weiter geht's mit dem letzten Upgrade: Ein Intel Xeon Phi ist eingezogen.
Ob er funktionieren wird: Fraglich. Das Mainboard *sollte* es können, "Above 4G decoding" ist im BIOS als Option auf jeden Fall vorhanden.
Für etwa 230€ (ohne EuSt) gab es aus Japan einen Nagelneuen Xeon Phi 7120P.
Durch den wirklich massiven Luftdurchsatz des Server sollte die Karte ausreichend gekühlt werden...
Der PCIe Riser sieht jetzt so aus:
Und einmal Gesamtaufnahme vom Server mit neuem RAM:
Das war es soweit an Bildern.
Kurz auf die Frage, warum ich das Ding angeschafft habe:
Zum Einen kann man mit 1TB RAM sehr spannende Dinge anstellen.
Zudem entwickle ich Simulationssoftware für Firmen, die ggf. auch solche Quad Socket Server nutzen -> Testplatform.
Dient außerdem als Compile- und Testsklave.
Mit dem Xeon Phi habe ich im Rahmen des GPGPU auch ein paar Experimente vor, habe ein paar Ideen, wozu der Phi sich nochmal besser als CPUs oder GPUs eignen könnte.
Falls Fragen aufkommen: Nur zu!
Die Server von Dell und HP dürften wohl jedem, der in diesem Unterforum unterwegs ist, ein Begriff sein. Von IBM / Lenovo und Supermicro hört man auch noch ab und an.
Von einem Hersteller hört man allerdings so recht wenig: Cisco!
Ich habe vor nicht allzu langer zeit einen Cisco UCS C460 M4 Server erworben, zu dem es im Internet auch nicht so sehr viele Informationen, die nicht von Cisco stammen, zu finden gibt.
Deshalb: Showthread!
Ich habe den Server auf ebay gekauft. Bestückt war er mit 4x Intel Xeon E7-4880 v2, 256GB DDR3-1600 auf 8 Memory Boards (laufen auf 1333MHz), einem PCIe Riser (der wiederum mit zwei Cisco NICs bestückt ist) und 12 Fillern für die SFF Slots.
Ich lasse die Bilder für sich sprechen... Mehr oder weniger.
Unten ist der Cisco Server mit seinen 4 Lüftermodulen zu sehen (Oben ein IBM X3850 X5, den ich von @Tom3 hier aus dem Forum gekauft habe).
Jedes Lüftermodul hat übrigens 50W(!), dreht maximal mit 10500RPM und macht dabei >100dB (kalibriert gemessen, Sone werden demnächst nochmal gemessen).
Hier schön zu sehen: Die 4 redundanten 1400W Netzteile, sowie die 2 Dual SFP+ Cisco NICs
So sah die Kiste ursprünglich aus, als sie angeliefert wurde.
...SFF Slots. 5 + 9 unterstützen auch U.2 SSDs, sagten sie...
Ich hatte zusätzlich, ebenfalls von @Tom3 noch 27* 32GB DDR3-1866 LRDIMM erworben, die ich dann auch eingebaut habe.
Kommen wir zu den Memory Risern und dem Speicherausbau:
Ja, der Speicher ist hot-pluggable, sofern das OS das unterstützt (und die Treiber installiert sind).
Im Fehlerfall teilt einem der Riser auch mit, welches DIMM hops gegangen ist.
Memory Riser vor dem RAM ausbau.
Das ist ein ziemlich massives Teil (ist auch ordentlich schwer!) vollflächiger Alu "Backplate". Schön finde ich ebenfalls die Amphenol Verbinder...
Ein Mal mit dem neuen RAM bestückt.
8 Riser á 4 Riegel á 32GB => 1024GB!
Die Technologie der Riser stammt übrigens von Intel und wird / wurde von mehreren Herstellern genutzt (IBM, Fujitsu, etc)
Kleines Intermezzo: Leistungsaufnahme.
...Benchmark Betrieb, alle 4 Netzteile am Laufen, Grid redundancy. Hängt noch eine 150W Threadripper WS mit dran, zugegebenermaßen. Also 850W.
Noch ein kurzes Intermezzo:
Habe direkt Ersatz CPUs mitgeordert.
...to be continued.
Beitrag automatisch zusammengeführt:
...und jetzt bitte nicht wegen der Antistatikfolie meckern. Ich selbst war geerdet und wollte nur fix Bilder machen.
Weiter geht es mit dem PCIe Riser.
"Original"
Hier sieht man schön die Halter zum Abstützen sowie die 2 Stromanschlüsse.
Sieht im Detail so aus. Schön auch das dicke PCB.
Die Stromkabel von Cisco sind nicht zu kriegen. Da der Kram wie die Dell Server bei Foxconn vom Band fällt und Dell exakt die selben Anschlüsse auf ihren PCIe Risern hat, habe ich einfach mal Dell PCIe Riser Power Cable beim freundlichen Chinesen geordert und hoffe, dass das funktioniert.
Eine der NICs. Schön zu sehen der (mutmaßlich) Extra Management Connector für Original Cisco Hardware, damit man die selbst konfigurieren kann, wenn der Server aus ist und man nur via IMC auf ihn zugreift!
Beitrag automatisch zusammengeführt:
Weiter geht's mit dem letzten Upgrade: Ein Intel Xeon Phi ist eingezogen.
Ob er funktionieren wird: Fraglich. Das Mainboard *sollte* es können, "Above 4G decoding" ist im BIOS als Option auf jeden Fall vorhanden.
Für etwa 230€ (ohne EuSt) gab es aus Japan einen Nagelneuen Xeon Phi 7120P.
Durch den wirklich massiven Luftdurchsatz des Server sollte die Karte ausreichend gekühlt werden...
Der PCIe Riser sieht jetzt so aus:
Und einmal Gesamtaufnahme vom Server mit neuem RAM:
Das war es soweit an Bildern.
Kurz auf die Frage, warum ich das Ding angeschafft habe:
Zum Einen kann man mit 1TB RAM sehr spannende Dinge anstellen.
Zudem entwickle ich Simulationssoftware für Firmen, die ggf. auch solche Quad Socket Server nutzen -> Testplatform.
Dient außerdem als Compile- und Testsklave.
Mit dem Xeon Phi habe ich im Rahmen des GPGPU auch ein paar Experimente vor, habe ein paar Ideen, wozu der Phi sich nochmal besser als CPUs oder GPUs eignen könnte.
Falls Fragen aufkommen: Nur zu!
Zuletzt bearbeitet:
