Gigabyte MJ11-EC1 NAS Server

[killer196]

Bei C3 werden die 4 SMT Kerne wohl automatisch Aktiviert, Das meldet er glaube ich das kein C3 unterstützt wird...

SMT ist an, S3 erreicht er nur wenn man ihn in Hibernation zwingt. Ich glaub die epyc reihe kann einfach keine tieferen C-States.

 

[Reaver1988]

120mm Adapter passt auch wunderbar. Jetzt kommt gleich endlich das passende Netzteil, die Tage dann das sas auf sata Kabel und dann sollte ich hoffentlich wunschlos glücklich sein.

 

[-->Andy<--]

Was braucht das Gerät an Strom bei 7 Festplatten? 5W*7 + 30-40W vom Board?

 

[Reaver1988]

muss ich mal messen. Aber denke deine Berechnung kommt da schon gut hin.

 

[Ceiber3]

Von mir auch nochmal Danke an @i-B4se, Blende passt perfekt.

 

[sch4kal]

Von mir auch nochmal Danke an @i-B4se, Blende passt perfekt.

PFf Blende, das geht auch ohne

 

[Reaver1988]

Klar geht es ohne, mit ist aber cooler

Ich bin jetzt ein paar Tage unterwegs mit dem guten Stück und bin sehr sehr zufrieden. lautstärke passt jetzt auch mit dem adaptierten 120mm Lüfter und die Performance ist ne ganz andere Welt als noch mit meinem HP N54L. Da mich bereits 2 Leute per PN kontaktiert haben: den Ram hier habe ich gekauft:

Crucial CT16G4RFD4213 (DIMM) RAM Module online kaufen | eBay

Entdecken Sie Crucial CT16G4RFD4213 (DIMM) RAM Module in der großen Auswahl bei eBay. Kostenlose Lieferung für viele Artikel!

www.ebay.de

2 Stück für 20€ (32gb) ist nicht verkehrt Dazu hatte ich mir eine 11€ Samsung 256gb nvme SSD geholt (die sind aber jetzt leider ausverkauft).

 

[Ceiber3]

Thx, für den Link.

 

[MrWahoo]

Ich bin jetzt ein paar Tage unterwegs mit dem guten Stück und bin sehr sehr zufrieden. lautstärke passt jetzt auch mit dem adaptierten 120mm Lüfter und die Performance ist ne ganz andere Welt als noch mit meinem HP N54L.

Ja, absolut.
Seit ein paar Tagen läuft mein HomeServer nun auch, die Kühlung ist zwar noch etwas provisorisch mit dem Adapter, aber ich hatte bislang keine 40°C und die Kiste ist unhörbar. Einziger Lüfter ist schließlich der Noctua.
Als RAM nutze ich 128 GB von den Samsung M393A4K40BB1-crc, die bekommt man auch gerne recht günstig.

Storage war bereits vorhanden, als System-SSD habe ich die Samsung SSD 970 PRO und Massenspeicher sind Kingston DC600M.

 

[Reaver1988]

Habe meinen Lüfter mit 2 Kabelbinder an den Adapter gemacht. Sieht nicht so mies aus wie es klingt der enermax Lüfter auf meinem Bild war btw kaputt, jetzt ist ein p12 drauf. Die Schrauben die den alten Lüfter am Kühler befestigt haben, passen wunderbar mit dem gedruckten Adapter

 

[MrWahoo]

Kabelbinder?
Na, das ist auch mal eine Idee!

 

[Reaver1988]

Ja sieht man oben auf dem Foto ein wenig..man muss zwingend erst die Schrauben unten (60mm Bohrungen) Befestigen, aber dann kommt man nicht mehr unter den Adapter um da die Schrauben für den Lüfter durchzujagen. Man könnte jetzt länger Schrauben und eine Mutter nehmen, aber da hatte ich nichts griffbereit. Der Kabelbinder war es und es fällt ehrlich gesagt auch nicht auf.

 

[Ceiber3]

Ja, absolut.
Seit ein paar Tagen läuft mein HomeServer nun auch, die Kühlung ist zwar noch etwas provisorisch mit dem Adapter, aber ich hatte bislang keine 40°C und die Kiste ist unhörbar. Einziger Lüfter ist schließlich der Noctua.
Als RAM nutze ich 128 GB von den Samsung M393A4K40BB1-crc, die bekommt man auch gerne recht günstig.

Storage war bereits vorhanden, als System-SSD habe ich die Samsung SSD 970 PRO und Massenspeicher sind Kingston DC600M.

Bin auch sehr zufrieden. Ist halt ein richtiges Serverboard für kleines Geld, was einfach jeden DDR4 Ram frist und sau viele Sata Anschlüsse bietet.
Von der Leistung her sogar stärker als meine Synology DS1821+ mit der ich auch sehr zufrieden bin.

 

[Thestroyer]

Weil ich im Rack noch ein wenig Platz habe sind die Boards jetzt in zwei kleine 1u Gehäuse gewandert und werden eingebaut sobald alles läuft.
Auf dem ersten Board werden nur irgendwie keine PCIe Karten erkannt (schon mehrere versucht), PCIe Stromversorgung habe ich auch mal angeschlossen, das Kabel steckt natürlich im x8.
"lspci" etc. zeigen auch nix (unter Proxmox getestet).
Werde das jetzt mal an dem 2. Board testen, BIOS hab ich auch schon resettet.

 

[Ceiber3]

Ansonsten mach doch mal ein Backup vom aktuellen Bios und lade das Consumer Bios. Vielleicht muss man auch irgendwas im Bios einstellen.

 

[Reaver1988]

Hey

Welches saß auf SATA Kabel verwendet ihr? Habe im Übereifer ein sas auf 8x SATA aus China geordert, aber das Board unterstützt ja nur 4x ,sodass das Resultat ist das 0 erkannt werden brauche jetzt ein funktionierendes 4x Kabel

 

[Ceiber3]

Von welchen Sas schreibst du ?
Den MiniSAS neben den Sata oder den SAS unten für die PCIe.
Für den MiniSAS nebend en Sata nutze ich schon immer so eins hier:

https://www.amazon.de/YIWENTEC-Mini-SFF-8087-7-Pin-Zielfestplatte/dp/B07C15LPWW/ref=sr_1_5?__mk_de_DE=%C3%85M%C3%85%C5%BD%C3%95%C3%91&crid=1JNIA3U9OMFV3&keywords=mini%2Bsas%2Bauf%2Bsata&qid=1701622750&sprefix=minisas%2Bauf%2Bsata%2Caps%2C100&sr=8-5&th=1

https://www.amazon.de/CABLEDECONN-Interner-Mini-SAS-Stecker-SATA-7-polig-Breakout-Kabel/dp/B00S7KTVN2/ref=sr_1_8?__mk_de_DE=%C3%85M%C3%85%C5%BD%C3%95%C3%91&crid=1JNIA3U9OMFV3&keywords=mini%2Bsas%2Bauf%2Bsata&qid=1701622840&sprefix=minisas%2Bauf%2Bsata%2Caps%2C100&sr=8-8&th=1

 

[Reaver1988]

Danke dir. Ich habe anscheinend den pcie sas als SATA missbrauchen wollen das erklärt warum es vermutlich nicht funktioniert hat

 

[Ceiber3]

Hier mal die Zen States die ich benutze für UnRaid. Geht auch bei jeden anderen Linux System. TrueNas Scale und co..
Mit den Vid bei P1/P2 kann man bestimmt noch viel weiter runter und noch bissel mehr Strom sparen.

./zenstates.py -p 0 -f 4c -d 4 -v 20 / ./zenstates.py -p 0 -f 48 -d 4 -v 2a

./zenstates.py -p 1 -f 30 -d 8 -v 80

./zenstates.py -p 2 -f 24 -d 8 -v 94


P0 = 3,8 Ghz, vCore = 1.35000 Mit guter Gehäuse Lüftung! / 3,6 Ghz, vCore = 1.2870 oder mit normaler Gehäuse Lüftung.
P1 = 1,2 Ghz, vCore = 0.75000
P2 = Idle 0,9 Ghz, vCore = 0.62500

Befehl zum anzeigen was für Werte gesetzt sind:

sudo ./zenstates.py  -l

Edit:

Habe noch bissel die Voltage im P1 und P2 gesenkt.

 

[Ceiber3]

Danke dir. Ich habe anscheinend den pcie sas als SATA missbrauchen wollen das erklärt warum es vermutlich nicht funktioniert hat

Hmm laut ein englischen Forum soll das auch funktionieren. Genauso mit dem SAS auf PCIe Adapter oben. Der Anschluss unten ist jedenfalls x8 angebunden.

 

[Reaver1988]

hast du da mal einen Link zu? Ich hätte jetzt gedacht, dass dafür ggf. noch ein SATA Controller oder sowas fehlt? Bekomme wie gesagt keine HDD mit dem Kabel angezeigt. Kann natürlich auch kaputt sein oder ich muss im Bios noch was umstellen, aber da hatte ich spontan nichts gefunden. Die neue Revision (die mit dem PCIE Slot) hat im Bios wohl einen Punkt wo man wählen kann ob PCIE oder SATA über SAS ausgegeben wird, die Option fehlt mir aber. Oder sollte ich mal ein Bios update wagen?

 

[radicale]

BIOS Update PCIe Version davon ist abzuraten im US Forum hat das wohl jemand Probiert...
https://forums.servethehome.com/index.php?threads/gigabyte-mj11-ec1-epyc-3151-mystery.41395/

 

[Reaver1988]

Nene das meinte ich auch nicht, sondern schon für das richtige Board. Aber da findet man auch nichts. Hab mir jetzt das 4er Kabel geholt und dann werden halt 4 über den mini sas und 4 über die normalen sata ports belegt. Passt so auch.

 

[Reaver1988]

Von welchen Sas schreibst du ?
Den MiniSAS neben den Sata oder den SAS unten für die PCIe.
Für den MiniSAS nebend en Sata nutze ich schon immer so eins hier:

https://www.amazon.de/YIWENTEC-Mini-SFF-8087-7-Pin-Zielfestplatte/dp/B07C15LPWW/ref=sr_1_5?__mk_de_DE=%C3%85M%C3%85%C5%BD%C3%95%C3%91&crid=1JNIA3U9OMFV3&keywords=mini%2Bsas%2Bauf%2Bsata&qid=1701622750&sprefix=minisas%2Bauf%2Bsata%2Caps%2C100&sr=8-5&th=1

https://www.amazon.de/CABLEDECONN-Interner-Mini-SAS-Stecker-SATA-7-polig-Breakout-Kabel/dp/B00S7KTVN2/ref=sr_1_8?__mk_de_DE=%C3%85M%C3%85%C5%BD%C3%95%C3%91&crid=1JNIA3U9OMFV3&keywords=mini%2Bsas%2Bauf%2Bsata&qid=1701622840&sprefix=minisas%2Bauf%2Bsata%2Caps%2C100&sr=8-8&th=1

Bist du sicher dass das passt? Der stecker vom Kabel ist viel größer als der auf dem Board

Edit: ne das passt nicht. Das muss das richtige sein: Cablecc Slimline SAS 4.0 SFF-8654 4i 38-Pin-Host-zu-4-SATA-7-Pin-Ziel-Festplatten-Fanout-Raid-Kabel 50 cm https://amzn.eu/d/hwlgZV1

 

[Ceiber3]

Bist du sicher dass das passt? Der stecker vom Kabel ist viel größer als der auf dem Board

Edit: ne das passt nicht. Das muss das richtige sein: Cablecc Slimline SAS 4.0 SFF-8654 4i 38-Pin-Host-zu-4-SATA-7-Pin-Ziel-Festplatten-Fanout-Raid-Kabel 50 cm https://amzn.eu/d/hwlgZV1

Oh sorry, hast recht. "SlimLine SAS 4i Connector (SATA III/ PCIe Signal)"

 

[Thestroyer]

Ansonsten mach doch mal ein Backup vom aktuellen Bios und lade das Consumer Bios. Vielleicht muss man auch irgendwas im Bios einstellen.

Wurde ja jetzt von abgeraten mit dem BIOS. Ich hab es jetzt mal auf dem anderen Board getestet und da scheint es genauso zu sein. In der Ausgabe (Spoiler) werden 4 U2 Ports mit x4 angezeigt, was ja irgendwie nach Bifurcation klingt. Proxmox zeigt mir da einen nicht identifizierten Netzwerkadapter an (ist aber eine Dual NIC PCIe x8 Karte), der nicht funktioniert. Ich sollte gleich mal noch eine x4 Karte testen ob die dann korrekt erkannt wird.

Spoiler

root@vs3:~# dmidecode -t slot
# dmidecode 3.4
Getting SMBIOS data from sysfs.
SMBIOS 3.2.1 present.

Handle 0x001C, DMI type 9, 17 bytes
System Slot Information
        Designation: U2_2
        Type: x4 PCI Express
        Current Usage: In Use
        Length: Long
        ID: 1
        Characteristics:
                3.3 V is provided
                Opening is shared
                PME signal is supported
        Bus Address: 0000:03:00.1

Handle 0x001D, DMI type 9, 17 bytes
System Slot Information
        Designation: SL_SAS
        Type: x4 PCI Express
        Current Usage: In Use
        Length: Short
        ID: 2
        Characteristics:
                3.3 V is provided
                Opening is shared
                PME signal is supported
        Bus Address: 0000:01:00.2

Handle 0x001E, DMI type 9, 17 bytes
System Slot Information
        Designation: M2_M
        Type: x4 PCI Express
        Current Usage: In Use
        Length: Short
        ID: 3
        Characteristics:
                3.3 V is provided
                Opening is shared
                PME signal is supported
        Bus Address: 0000:01:00.3

Handle 0x001F, DMI type 9, 17 bytes
System Slot Information
        Designation: U2_2_PortB
        Type: x4 PCI Express
        Current Usage: In Use
        Length: Long
        ID: 4
        Characteristics:
                3.3 V is provided
                Opening is shared
                PME signal is supported
        Bus Address: 0000:03:00.2

Handle 0x0020, DMI type 9, 17 bytes
System Slot Information
        Designation: U2_1_PortA
        Type: x4 PCI Express
        Current Usage: In Use
        Length: Long
        ID: 5
        Characteristics:
                3.3 V is provided
                Opening is shared
                PME signal is supported
        Bus Address: 0000:03:00.3

Handle 0x0021, DMI type 9, 17 bytes
System Slot Information
        Designation: U2_1_PortB
        Type: x4 PCI Express
        Current Usage: In Use
        Length: Long
        ID: 6
        Characteristics:
                3.3 V is provided
                Opening is shared
                PME signal is supported
        Bus Address: 0000:03:00.4

 

[Reaver1988]

Oh sorry hast recht. "SlimLine SAS 4i Connector (SATA III/ PCIe Signal)"

Ist jetzt bestellt, morgen neuer Versuch

 

[Thestroyer]

Hier neuer Versuch mit PCIe x4 Intel Karte (die zwei i210 NICs sind die vom Board):

Spoiler

lspci -nn
00:00.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Root Complex [1022:1450]
00:01.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-1fh) PCIe Dummy Host Bridge [1022:1452]
00:01.1 PCI bridge [0604]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) PCIe GPP Bridge [1022:1453]
00:01.4 PCI bridge [0604]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) PCIe GPP Bridge [1022:1453]
00:01.5 PCI bridge [0604]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) PCIe GPP Bridge [1022:1453]
00:02.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-1fh) PCIe Dummy Host Bridge [1022:1452]
00:03.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-1fh) PCIe Dummy Host Bridge [1022:1452]
00:04.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-1fh) PCIe Dummy Host Bridge [1022:1452]
00:07.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-1fh) PCIe Dummy Host Bridge [1022:1452]
00:07.1 PCI bridge [0604]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Internal PCIe GPP Bridge 0 to Bus B [1022:1454]
00:08.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-1fh) PCIe Dummy Host Bridge [1022:1452]
00:08.1 PCI bridge [0604]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Internal PCIe GPP Bridge 0 to Bus B [1022:1454]
00:14.0 SMBus [0c05]: Advanced Micro Devices, Inc. [AMD] FCH SMBus Controller [1022:790b] (rev 59)
00:14.3 ISA bridge [0601]: Advanced Micro Devices, Inc. [AMD] FCH LPC Bridge [1022:790e] (rev 51)
00:18.0 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 0 [1022:1460]
00:18.1 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 1 [1022:1461]
00:18.2 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 2 [1022:1462]
00:18.3 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 3 [1022:1463]
00:18.4 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 4 [1022:1464]
00:18.5 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 5 [1022:1465]
00:18.6 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 6 [1022:1466]
00:18.7 Host bridge [0600]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Data Fabric: Device 18h; Function 7 [1022:1467]
01:00.0 PCI bridge [0604]: ASPEED Technology, Inc. AST1150 PCI-to-PCI Bridge [1a03:1150] (rev 04)
02:00.0 VGA compatible controller [0300]: ASPEED Technology, Inc. ASPEED Graphics Family [1a03:2000] (rev 41)
03:00.0 Ethernet controller [0200]: Intel Corporation I210 Gigabit Network Connection [8086:1533] (rev 03)
04:00.0 Ethernet controller [0200]: Intel Corporation I210 Gigabit Network Connection [8086:1533] (rev 03)
05:00.0 Non-Essential Instrumentation [1300]: Advanced Micro Devices, Inc. [AMD] Zeppelin/Raven/Raven2 PCIe Dummy Function [1022:145a]
05:00.2 Encryption controller [1080]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) Platform Security Processor (PSP) 3.0 Device [1022:1456]
05:00.3 USB controller [0c03]: Advanced Micro Devices, Inc. [AMD] Zeppelin USB 3.0 xHCI Compliant Host Controller [1022:145f]
06:00.0 Non-Essential Instrumentation [1300]: Advanced Micro Devices, Inc. [AMD] Zeppelin/Renoir PCIe Dummy Function [1022:1455]
06:00.1 Encryption controller [1080]: Advanced Micro Devices, Inc. [AMD] Zeppelin Cryptographic Coprocessor NTBCCP [1022:1468]
06:00.2 SATA controller [0106]: Advanced Micro Devices, Inc. [AMD] FCH SATA Controller [AHCI mode] [1022:7901] (rev 51)
06:00.3 Audio device [0403]: Advanced Micro Devices, Inc. [AMD] Family 17h (Models 00h-0fh) HD Audio Controller [1022:1457]

Scheint also auch nicht erkannt zu werden. Versuche es gleich noch mal mit nem KALI Live Image...

 

[Ceiber3]

Achso der Slimsas neben den Sataports kann wohl auch PCIe 3.0 x4, jedenfalls nach der EC0 Anleitung. Gerne könnte das mal jemand testen.
Crossflash vom Retail Board EC0 soll wohl funktionieren. https://forums.servethehome.com/ind...-mj11-ec1-epyc-3151-mystery.41395/post-397607
Ich mache das jetzt mal selber mit IPMI. Habe aber leider kein Kabel um den PCIe x8 zu testen.

Ich würde aber vorher das original Bios backupen. Habe mal meins hochgeladen.
Vielleicht geht ja dann deine 10 Gbit Karte am Adapter.

Edit: Hat funktioniert, gibt auch neue Optionen. Gibt jetzt die Aufteilung des PCIe Ports, soll aber angeblich nicht funzen laut Englischen Forum. Und man kann den SlimSas auf Sata und PCIe umstellen.

 

[Flotho]

Achso der Slimsas neben den Sataports kann wohl auch PCIe 3.0 x4, jedenfalls nach der EC0 Anleitung. Gerne könnte das mal jemand testen.
Crossflash vom Retail Board EC0 soll wohl funktionieren. https://forums.servethehome.com/ind...-mj11-ec1-epyc-3151-mystery.41395/post-397607
Ich mache das jetzt mal selber mit IPMI. Habe aber leider kein Kabel um den PCIe x8 zu testen.

Ich würde aber vorher das original Bios backupen. Habe mal meins hochgeladen.
Vielleicht geht ja dann deine 10 Gbit Karte am Adapter.

Edit: Hat funktioniert, gibt auch neue Optionen. Gibt jetzt die Aufteilung des PCIe Ports, soll aber angeblich nicht funzen laut Englischen Forum. Und man kann den SlimSas auf Sata und PCIe umstellen.

Wie hast du das Backup gemacht und auf welchem Wege das neue eingespielt? Eingespielt per IPMI?