Welche 10 Gigabit Dualport SFP+ Karte

[DerErzherzog]

Guten Abend zusammen,

zuersteinmal hoffe ich, dass es in Ordnung ist, das ich hier einen Thread aufgemacht habe, da ich nicht weiß ob es nicht in den 10 Gigabit Sammelhtread gehört, falls es nicht recht sein sollte, bitte verschieben

Zur Situation, ich habe vor einiger Zeit diese 10 Giabit Karten gekauft:
Mellanox Connect X2
10G Netzwerk Kit 2x Mellanox ConnectX 10Gigabit NIC 10GBe 1x 3m SFP+ Cisco Kabel | eBay

Bin soweit auch recht zufrieden. Würde jetzt gerne aufgrund von PCIe mangel auf Dualport Karten umsteigen, zwecks spielerein mit Cluster und VM Livemigration
Nun stellt sich mir die Frage wie ist es mit der Kompatibilität für den Dell PowerEdge T20? und dem Ubiquiti edgdeswitch 16 XG
Ubiquiti Networks - EdgeSwitchâ„¢ 16 XG

Hatte anfänglich auch Kompatibiltätsprobleme mit dem Switch und den Karten. Nach diversen Firmwareupdates ging es aber dann.


Nun die Frage. Könnt ihr mir Dualport Karten empfehlen?
Folgende Karten habe ich gefunden:
HP NC550SFP Dual Port 10GbE Server Adapter P/N 581199-001 Spare 586444-001 5704327805939 | eBay

IBM FC-Controller QLE8142 Dual-Port 10Gbps PCI-e ohne SFP - 42C1802 | eBay

Chelsio N320E-SR PCIe x8 NIC 10Gigabit 10GBe SFP+ Dual Port Server 110-1088-30 | eBay


Preislich sollte es wennmöglich unter 50€ pro Karte sein, bräuchte mehr als eine Karte


Aktuell habe ich ja eine Mellanox Connect X2 wo genau ist da eigentlich der Unterschied zur X3? Habe mal was gehört das der Stromverbrauch deutlich geringer ist?
Wie ist dieser bei meinen ausgewählten Karten hat da jemand Erfahrung?

Würde mich sehr freuen, wenn Jemand schon erfahrungswerte hat

Viele Grüße und ein schönen Restsonntag!

 

[DerErzherzog]

Hmm, niemand eine Idee, welche Karte mit dem Dell T20 kompatibel ist, welche am empfehlenswertesten ist?

Viele Grüße

 

[niklasschaefer]

Hi,
ich habe deine Thread jetzt erst gesehen.

Ich habe diese Karte verbaut:
IBM QLE8142-IBMX Dual Port 10 Gbit/s SFP+ SR CNA SAN LAN Server Adapter 42C1802 | eBay

Wie sie auch von dir verlinkt ist. Um eine 100% kompatibilität zu erreichen habe ich mir bei fs.com die passenden Transciever für IBM und Ubiquiti bestellt + passende OM3/OM4 LC/LC Strippe. Unter welchem OS sollen die Laufen?

Der Unterschied zwischen X2 und X3 ist der geringere Stromverbrauch/ bessere Latenzen. Den Stromverbrauch kenne ich nicht der KArte ist mir eigentlich auch recht egal da die 10W nicht mehr wirklich ins Gewicht fallen. Aber das ist grundsätzlich mal ein guter Anhaltspunkt.

Gruß Niklas

 

[besterino]

@niklassschaefer: weisst Du zufällig, ob die NIC unter ESXi 6.5/6.7 ohne Auffälligkeiten/Besonderheiten lüppt?

 

[niklasschaefer]

@besterino Das kann ich dir am Wochenende sagen da ich da den Umzug von Hyper-V auf Esxi geplant habe.

 

[DerErzherzog]

Hey Niklas,

Danke dir für deine schnelle Antwort!
Geplant ist Windows Server 2016 auf dem Dell T20 zu installieren.
LWL ist nicht geplant eher DAC. Das müsste auch mit einem DAC Kabel von Ubiquiti gehen oder? Hast du DAC Kabel im Einsatz?
Bzw. die Möglichkeit DAC zu testen, das wäre super.

Wird die Karte ohne Kühlkörper nicht sehr heiß? Fand das sehr auffällig, da andere 10 Gigabit Karten alle einen Kühlkörper haben, der hier fehlt.
Du hast die Karte aber nicht in einem T20 laufen oder?

Wie ist es allgemein mit der Kompatibilität kommt es da sehr aufs Mainboard an? Könnte ich mit den anderen Karten Probleme bekommen?

Vielen Dank schonmal im Voraus und viel Grüße

 

[niklasschaefer]

Hi,
also im Windows Server 2016 läuft die karte out of the box. Ich habe hier nur die Cisco Kabel welche bei den Mellanox dabei sind. Mit denen läuft das aber in einem TP-Linl T1700G-28TQ Switch. Bei mir war ein Kühlkörper drauf obwohl im Bild nicht abgebildet daher einfach probieren den im Luftstrom des Servers sollten sie nicht zu heiß werden. Bei mir läuft die Karte in einem Dell EMC Poweredge T440 relativ neue Hardware ohne Probleme. Daher sage ich mal wird auch bei dir ohne nennenswerte Probleme laufen, sicher bin ich mir nicht.


Gruß

Niklas

 

[Blondfreak]

Hallo Leute,
jetzt habe ich eine Frage bzgl. der SFP+ Karten.
Kann die von dir verlinkte
IBM QLE8142-IBMX Dual Port 10 Gbit/s SFP+
denn per Wake-on-Lan verwendet werden?
Wie sieht es mit IPMI aus?
Wäre starten und herunterfahren hierüber möglich?
Suche gerade nach einer 10Gbit Netzwerkkarte für einen TV-Server der bei bedarf hoch und runter gefahren werden kann.

Gruß
Sebastian

 

[martingo]

Die Karte hat mit IPMI überhaupt nichts zu tun.

WakeOnLan würde ich mich nicht drauf verlassen, aber notfalls kannst du doch die onboard-nic fürs wol hernehmen.

 

[Blondfreak]

ja ich muss mich noch weiter lesen.... aber danke für die Antwort.
Da hast du natürlich recht das die onboard nic dafür hergenommen werden kann.

 

[besterino]

@Niklas: wenn du mir am WE oder eben wenn du es mal ausprobiert hast, eine kurze Nachricht (gerne auch per PN) rüberbeamen könntest, wäre das natürlich mal total töfte!

Hab hier schon zwei Dual-SFP+ NICs (gleiches Fujitsu-Modell) die mit ESXi/iommu rumzicken (trotz Intel-Chip!) und würde gerne weitere „partielle Fehlkäufe“ am Gebrauchtmarkt vermeiden.

Sorry für Thread-Hijack...

 

[niklasschaefer]

@besterino Mache ich werde die Karte heute mal in meinen Test-Esxi Stecken und schauen ob sie unter 6.5 und 6.7 lüppt. Sobald ich was weiß melde ich mich bei dir.


Gruß Niklas

 

[besterino]

Spitze & Danke!

 

[DerErzherzog]

Abend zusammen,

konnt am Wochenende bisschen testen.
die IBM Karte wurde ohne Treiber nicht erkannt.
Nach Treiberinstallation wurde die Karte erkannt aber es wird in Windows angezeigt das keine Netzwerkverbindung besteht.
Getestet mit Cisco und Ubiquiti DAC Kabeln. Hat jemand einen Tip?

Bei der HP Karte habe ich nur mit Hilfe von Drivemax (erschien mir zwar unseriös aber ich habe absolut keine Treiber auf der HP seite gefunden) die Treiber installiert mit dem manuellen installer.
Nun wollte ich den Treiber auch so haben dafür muss man das Hauptprogramm installieren... Das auch mal gemacht, Treiber von HP Deinstalliert neugestartet und jetzt fährt der T20 nicht mehr hoch, läuft gerade alles nicht so :/ schade bei Mellanox war das einfacher.

 

[niklasschaefer]

Hallo Besterino,
akso Karte läuft im Esxi nicht so richtig. Da muss man wohl auf gute Intel/HP Karten setzen. Den die laufen beide super in Esxi.


Gruß Niklas

- - - Updated - - -

Hi,
wie schaut es aus. DAC Kabel alle richtig gesteckt? Ports im Switch sauber konfiguriert? Welche Fehlermeldung tritt beim booten auf?


Gruß

Niklas

 

[H_M_Murdock]

DAC Kabel würde ich zur Verbindung von Geräten unterschiedlicher Hersteller untereinander ohnehin nicht verwenden und niemandem empfehlen.
Ich hatte mich vor kurzem damit intensiver beschäftigen müssen weil ich eine Lösung finden musste zwei ESXi-Hosts an ein Storagesystem von Tintri anzubinden.

Das Problem ist dass hier einfach zu viele Kompatibilitätsprobleme herrschen. Jeder Hersteller gibt zwar seine Kabel für die eigenen Geräte frei aber herstellerübergreifend ist das immer ein Glücksspiel.
10GBase-T oder 10GBase-SR wären hier die Mittel der Wahl. Nicht zu empfehlen sind SFP+ Module die auf 10GBase-T umsetzen da diese durch ihren hohen Strombedarf den SFP+ Slots des Switches zusammenbrechen lassen können, somit geht die Verbindung ggf. verloren wenn sehr viel auf dem Interface los ist.

Bei den DAC-Kabeln ist übrigens zu beachten dass es aktive und passive gibt. Am wenigsten Probleme gibt es wohl mit den passiven bis 5 Metern Länge. Diejenigen mit denen ich gesprochen habe hatten die besten Erfahrungen mit Kabeln von Cisco gemacht.

 

[DerErzherzog]

Danke für eure Antworten, also Cisco DAC und Ubiquiti funktionieren Super mit Mellanox Karten. Komisch halt das der Switch eine Verbindung anzeigt, windows aber nicht. Deshalb tippe ich eher auf Treiber Probleme?
Die HP Karten jedenfalls bringe ich absolut nicht zum laufen und sind deshalb raus....
Hmm alles schwieriger wie gedacht :/

 

[besterino]

Hallo Besterino,
akso Karte läuft im Esxi nicht so richtig. Da muss man wohl auf gute Intel/HP Karten setzen. Den die laufen beide super in Esxi.

Schade, danke für die Info! Da der Intel-Chipsatz allein reicht u.U. auch nicht. reicht, werde ich wohl mal nach einer original Intel-NIC jagen.

 

[DerErzherzog]

Hmm oh man vielleicht habe ich auch das Problem festgestellt warum es eventuell nicht funktioniert..............
Durch die Umrüstung auf die M2 SSD musste der erste PCIe Steckplatz herhalten. Daher habe ich den Physischen X16 verwendet der aber Elektrisch nur X4 angeshchlossen ist.... Obwohl die Mellanox Connect X2 die X8 benötigt da auch funktioniert komischerweise aber auch nur mit Halber geschwindigkeit.... Obwohl X2 ja ausreichen müsste naja....

 

[niklasschaefer]

@ bseterino: Wenn du ein gutes Angebot gefundne hast. denke an mich

@derErzherzog: Ja das ist blöd aber es kann sein das die Karte das braucht deswegen habe ich auf Sockel 3647 umgesattelt da das Lane Problem echt sch**** ist.

 

[DerErzherzog]

Hmm ja vermute ganz Stark das die Lanes obwohl Theoretisch alles reichen müsste da was faul ist... Theoretisch sollte es mit der Connect X3 welche zwar PCI 3.0 Brauch aber nur X4 angebunden ist ja funktionieren hmm. Achja nicht einfach das ganze :/
Hmm umrüsten wollte ich eigentlich nicht. Leider alles recht teur und nur fürs Hobby.
Sockel 3647 ist natürlich was ganz feines


Mit der Mellanox Connect X3 leider das gleiche grgebnis rund 500MB sehr merkwürdig, zumal hier die Elektrische Leitung mit X4 passt, wenn auch die PCIE version unterschiedlich ist, was aber unabhängig davon genug Potenzial haben sollte. Ob es wohl an der SSD liegt die über einen Adapte rangeschlossen ist??