[Sammelthread] Der 100Gbit Netzwerk Thread, ein bisschen 40gbit und „beyond“ ;)

[underclocker2k4]

fs.com benutz ich nich (professionell erst Recht nicht), haben nur Flexoptix oder Original Transceiver.

Dann nehmen wir flexoptix:

25G SFP28 LR with dual CDR | 10 km, λ1310 nm, LC-Duplex, Singlemode

Universal SFP28 TransceiverUse FLEXBOX to configure to almost any vendorFor 25GBASE-LR Ethernet linksIntegrated Clock-Data-Recovery (CDR)Supported Data Rates: 25.78 Gbit/sUp to 10 km via Singlemode OS2LC-Duplex Connector

www.flexoptix.net

Auch keine Lasche.
Ich weiß, dass es -SR mit Lasche gibt.

Es ist aber kein Standard. SFP28 unterscheiden sich bezüglich der Mechanik nicht von SFP oder SFP+ oder SFP56 oder SFP112.
Das manche Hersteller Laschen dran haben ist ganz nett und für die ein oder andere Anwendung (3 Stock cages) mitunter fast schon zwingend. Denn hast du ein Problem am mittleren SFP und das Tool nicht am Start fummelste dir einen ab.
Das kann aber auch nachteilig sein. An einem Server würde ich sowas kategorisch ausschließen.
D.h. auch, dass Flexoptix z.B. für Server und -SR nichts anzubieten hat. Zumindest gemäß Produktbildern.
(bzw. halt abmachen, wobei man da auch nen guten Rest stehen lassen muss, sonst bekommste den nicht raus)

 

[sch4kal]

Dann nehmen wir flexoptix:

25G SFP28 LR with dual CDR | 10 km, λ1310 nm, LC-Duplex, Singlemode

Universal SFP28 TransceiverUse FLEXBOX to configure to almost any vendorFor 25GBASE-LR Ethernet linksIntegrated Clock-Data-Recovery (CDR)Supported Data Rates: 25.78 Gbit/sUp to 10 km via Singlemode OS2LC-Duplex Connector

www.flexoptix.net

Auch keine Lasche.
Ich weiß, dass es -SR mit Lasche gibt.

Alle Flexoptix 25G Transceiver, die wir bekommen haben, hatten eine Lasche. Nur auf den Produktbildern von der Homepage sind davon keine mehr zu sehen.

 

[java4ever]

What the....das Ding braucht im Idle weniger Strom als ein ICX6450-24P...das nenn ich mal extrem effizient, für ein 18-Port 25G + 4-Port 100G Switch.

Jo... Deswegen mag ich den Kram so gerne. Wenn du n Rev A1 ASIC hast (solltest du) funktioniert sogar VXLAN Routing vernünftig.

Ich hab irgendwann mal power scaling gemessen:
Ca. 2.25W pro zusätzlichem 100G Port, 1.5W wenn sie auf 40G linken. 25G hatte ich nicht gemessen (war am SN2100)

 

[sch4kal]

@java4ever weißt du eigentlich, ob man bei den Teilen den RAM upgraden kann ? Also Größerer bzw. ECC RAM ?

 

[java4ever]

@java4ever weißt du eigentlich, ob man bei den Teilen den RAM upgraden kann ? Also Größerer bzw. ECC RAM ?

ECC RAM haben die sowieso. DDR3 SODIMM ECC. Glaube 8GB ist das höchste der Gefühle.

Das ist aber auch nur n Atom, ne

Original müsste 1x MT18KSF1G72HZ-1G6P1ZG drin sein

8GB 2RX8 PC3L-12800S

Mehr geht auch glaube ich nicht (nur 1 Slot und DDR3 SODIMM ECC bis 8GB)

 

[Aragonion]

Haltet Ihr 500 Euro Setpreis auf Kleinanzeigen für 2x ConnectX6 DX je 2 Port Karten (erfordern Pcie 4.0 x16) für einen guten Peis ?

 

[java4ever]

Haltet Ihr 500 Euro Setpreis auf Kleinanzeigen für 2x ConnectX6 DX je 2 Port Karten (erfordern Pcie 4.0 x16) für einen guten Peis ?

Ist ein fairer bis guter Preis (2 Karten á 250€). Würde ich selbst nehmen, aber du warst ja quasi zuerst Und ich hab gerade noch einen ICX7650-48ZP in USA für $408 gekauft - bin sehr gespannt ob der was taugt

 

[besterino]

Jo, würd ich für zuschlagen.

 

[Aragonion]

gesagt getahn

 

[java4ever]

Der Preis war zu gut. Und der Plan war ja sowieso, einige meiner SN2700 mit Spectrum A0 auszutauschen (Spectrum A0 hat ein paar VXLAN Limitierungen).

Möchte zufällig jemand auf einen sehr sparsamen 32x100G Mellanox SN2700 switch umsteigen?

 

[besterino]

Kostenpunkt? Und was heisst "sehr sparsam"?

 

[java4ever]

Kostenpunkt?

Regulär auf dem Markt würde ich die in EU so um die 1.5k anbieten, für HWLuxx natürlich Sonderpreis

Und was heisst "sehr sparsam"?

Ca 51W im IDLE mit 0 Ports und einer PSU.

Power Scaling hatte ich mal beim Geschwister SN2100 gemessen:
2.25W pro aktivem 100G port oder 1.5W pro 40G port (mit DACs gemessen, also etwaigen Verbrauch durch Transceiver dazurechnen)

 

[Zeitmangel]

@java4ever
Träumchen
DAC ist aber einerseits mit Abstand immer am effizientesten, andererseits nicht ganz nah an Daheim-RL bei so einem Moloch von Switch. Oder verwertet hier wer dermaßen viele Ports nur innerhalb des Racks?

 

[java4ever]

Ist gemischt. Mit etwas anderem als DAC zu messen, macht aber wenig Sinn, da man selten die genaue Leistungsaufnahme vom Transceiver selbst kennt, während ein DAC eben relativ nah an 0 dran liegt.

Zudem gibt es ja eine große Auswahl an Transceivern, die alle unterschiedlich viel Strom brauchen

 

[Zeitmangel]

@java4ever
Ja. Stimmt schon. Mich selbst hätte halt schon der gut geschätzte Verbrauch für eine Strecke außerhalb des Racks.
War wie gesagt aber auch kein Gemoser. Nur eine Nachfrage

Zudem gibt es ja eine große Auswahl an Transceivern, die alle unterschiedlich viel Strom brauchen

Tatsächlich sehr spannend, aber das untersucht (testet) auch keiner so wirklich. Nie gesehen sowas

 

[sch4kal]

Tatsächlich sehr spannend, aber das untersucht (testet) auch keiner so wirklich. Nie gesehen sowas

Weils bei den Verbräuchen der Geräte selbst und des Equipments, das daran angeschlossen wird, keinen mehr interessiert. Außerdem arbeitet man mit den Gegebenheiten, die da sind. Und das ist bei vielen RZs mittlerweile die Wahl aus Cat6a und OS2 Singlemode.

 

[java4ever]

Mich selbst hätte halt schon der gut geschätzte Verbrauch für eine Strecke außerhalb des Racks.

Kannst du dir ja einfach ausrechnen.

Einfach den Verbrauch pro Transceiver zu dem gemessenen Verbrauch pro Port dazu addieren

So ein 100GBase-SR4 ca 2W, ein 100GBase-CWDM4 3W


Der Punkt ist: die Verbräuche von Transceivern sind ja für den Vergleich von Switchen erstmal egal. Die kommen ja immer einfach oben drauf.
Bei der Messung ging es ja drum, den Stromverbrauch von Switchen zu vergleichen.

Son ein Tomahawk 1 braucht irgendwie seine 130W im IDLE. Dafür nur unwesentlich mehr wenn dann Ports aktiv sind. Hat Broadcom wohl keine Lust auf powersaving features wie Clock Gating gehabt

 

[Zeitmangel]

@sch4kal
Ja... Wie gesagt aber, nie gesehen. "keinen mehr" wäre ggf. in der Vergangenheit was zu finden gewesen, Aber du hast Recht. Bzw. wie einer mal sagte, und mich nervt das ja auch:
"Und die s.g. Enthusiasten nagen dann an den Resten der nur teils abgerockten Kadaver der RZ-Resterampe."

 

[java4ever]

Stromverbrauch von Transceivern steht übrigens immer in deren Datenblatt.
Bei so 400G Switchen kann der Verbrauch durch Transceiver durchaus mal den Verbrauch des Switches selbst WEIT übersteigen

 

[besterino]

Regulär auf dem Markt würde ich die in EU so um die 1.5k anbieten, für HWLuxx natürlich Sonderpreis

Puh, da ist der Aufpreis zu meinem ~200-Euro-Powerklauer schon happig. Wie ist denn eigentlich so die Lautstärke z.B. im Vergleich zu nem DX010?