Höchstens den BMC Chip extern auslesen
Gigabyte MJ11-EC1 NAS Server
- Ersteller radicale
- Erstellt am
Luckysh0t
Enthusiast
Falls jemand löten kann und Lust auf ein Abenteuer hat, ich könnte das nicht..
Shihatsu
Urgestein
- Mitglied seit
- 16.08.2005
- Beiträge
- 4.988
Huhu, ich stürz mich jetzt auch mal in das Abenteuer hier.
Folgendes möchte ich jetzt bestellen:
Board:
www.ram-koenig.de
Case:
PSU:
Bootmedium:
SATA-Adapterkabel:
Vorhanden sind:
8 Sata Platten
4*16GB ECC RAM
Das ganze wird dann ein TrueNAS. Hab ich noch was vergessen an Kleinigkeiten?
Später soll dann noch das hier dazu:
Da fehlt dann noch ein Kabel, oder? Da soll dann ne Mellanox dran für 10G
Folgendes möchte ich jetzt bestellen:
Board:
Gigabyte MJ11-EC1 AMD EPYC 3151 4x2,7 Ghz Mini-ITX Mainboard+ ATX Adapter Server - RAM-König
Gigabyte Mini ITX Mainbord / AMD EPYC Gigabyte MJ11-EC1 Server Mainboard / AMD EPYC 4C/8T 2,7Ghz - 2,9 Ghz 45W TPM Inkl ATX 24 Pin Adapter
www.ram-koenig.de
PSU:
Bootmedium:
SATA-Adapterkabel:
Vorhanden sind:
8 Sata Platten
4*16GB ECC RAM
Das ganze wird dann ein TrueNAS. Hab ich noch was vergessen an Kleinigkeiten?
Später soll dann noch das hier dazu:
SFF-8654 8i to PCIe 4.0 x16 Adapter for Mainboard DIY Computers Accessories | eBay
This product SFF-8654 interfaces PIN signal is defined by general signal. If your machine SFF-8654 interfaces PIN signal is defined as special design, this product is not compatible. This product is SFF-8654 8i to PCIe x16 interfaces, and actually it can only go to PCIe x8, that is, PCIe x8 in...
www.ebay.de
pwnbert
Urgestein
- Mitglied seit
- 30.10.2014
- Beiträge
- 4.152
Ich hab mir das Brett auch schon angeschaut, bin aber noch nicht 100% schlau draus.
Des sind 4x SATA am Brett und 1x SlimSAS, oder?
Also könntest du jetzt 8x SATA bekommen oder 4x SATA und 4x PCIe über irgend einen dubiosen SFF-PCIe Adapter deiner Wahl vom Chinamann, oder?
Für 8x SATA und PCIe für die NIC bräuchtest du doch 2x SlimSAS am Brett, oder? Sind da 2 und ich seh sie nicht?
Was evtl. auch ginge wäre nen HBA an den SlimSAS machen für mehr SATA und ne NIC auf den M.2? Auch Adapterhölle.
.. Machst es dann so, dass dus "unsachgemäß" installierst und den Datenträger "teilst", damit du ihn auch als Laufwerk für die "Apps" verwenden kannst unter TrueNAS? Urbackup etc.? Oder verwendest da gar nix?
Case&PSU: Hab ich mir nie genauer angesehen. k.A. was die Case im verlinkten Thread können, habs nur überflogen. Mir hätte das "große" gefallen, werd aber die Finger sein lasse, weiterhin meinen Gebrauchtkram nehmen und mal auf 19" gehen. Zum PSU kann ich nix sagen, musst dir selbst raussuchen, gibt ja zum Glück schon massenhaft Messergebnisse, sonst robotR fragen, ob er ein gutes SFX im Kopf hat.
Des sind 4x SATA am Brett und 1x SlimSAS, oder?
Also könntest du jetzt 8x SATA bekommen oder 4x SATA und 4x PCIe über irgend einen dubiosen SFF-PCIe Adapter deiner Wahl vom Chinamann, oder?
Für 8x SATA und PCIe für die NIC bräuchtest du doch 2x SlimSAS am Brett, oder? Sind da 2 und ich seh sie nicht?
Was evtl. auch ginge wäre nen HBA an den SlimSAS machen für mehr SATA und ne NIC auf den M.2? Auch Adapterhölle.
Eig. schade drum, aber wenn alle SATA voll sind, muss ja wohl
.. Machst es dann so, dass dus "unsachgemäß" installierst und den Datenträger "teilst", damit du ihn auch als Laufwerk für die "Apps" verwenden kannst unter TrueNAS? Urbackup etc.? Oder verwendest da gar nix?Joa, DE Preise sind fies, auf ebay aus CN bekommst um zu 2 davon nen neuen HBA gartis dazu ^^... ja ne, kann man kaufen, ich mag diese hellblauen Kabel, hab die in SATA-SATA Ausführung als auch in SFF-SATA Ausführung. Finde die für unseren Heimgebrauch äußerst praktisch.
Case&PSU: Hab ich mir nie genauer angesehen. k.A. was die Case im verlinkten Thread können, habs nur überflogen. Mir hätte das "große" gefallen, werd aber die Finger sein lasse, weiterhin meinen Gebrauchtkram nehmen und mal auf 19" gehen. Zum PSU kann ich nix sagen, musst dir selbst raussuchen, gibt ja zum Glück schon massenhaft Messergebnisse, sonst robotR fragen, ob er ein gutes SFX im Kopf hat.
Luckysh0t
Enthusiast
Du hast einen x8 Port und nach dem Uefi Update den umschaltbaren 4* Sata/x4Pcie Kombiport. Und natürlich den x4 m.2 Port.
pwnbert
Urgestein
- Mitglied seit
- 30.10.2014
- Beiträge
- 4.152
Wo ist das auf dem Brett?
Ich seh 4x einzelne SATA und 1x so einen SFF Slim-SATA, welcher 4 SATA Lanes oder 4 PCIe Lanes kann, zudem 1x M.2.
Dann seh ich am Produktfoto unten mittig noch irgend einen Stecker der ein bissl wie ein M.2 Connector aussieht, kA, was das ist.
Ich seh 4x einzelne SATA und 1x so einen SFF Slim-SATA, welcher 4 SATA Lanes oder 4 PCIe Lanes kann, zudem 1x M.2.
Dann seh ich am Produktfoto unten mittig noch irgend einen Stecker der ein bissl wie ein M.2 Connector aussieht, kA, was das ist.
Welches UEFI Update ?
Luckysh0t
Enthusiast
Vlt ist Update in dem Fall nicht die richtige Wortwahl, man flasht das Uefi vom EC0.
Beitrag automatisch zusammengeführt:
Das ist SlimSAS 8i/SFF-8654 8i der kleine entsprechend 4i. Kann aber leider kein Bifurkation, sind pcie x8, daher habe ich eine QNAP Karte mit PLX Chip an dem angeschlossen. So habe ich 2 ∗ 2.5 Gbit LAN und 2 m.2* Ports an dem.
Zuletzt bearbeitet:
Ist das nicht der Server, aus welchem das MJ11 kommt?
Mit 120€ inkl. Versand und 16GB Ram aktuell wohl recht günstig, wenn man Verwendung für den Rest haben sollte:
www.piospartslap.de
Zum Vergleich: Bei Ram König kostet das Board mit ATX Adapter alleine aktuell ~60€.
Mit 120€ inkl. Versand und 16GB Ram aktuell wohl recht günstig, wenn man Verwendung für den Rest haben sollte:
Gigabyte G431-MM0 Server AMD EPYC embedded 3151 SoC CPU ohne SSD 16GB PC4 RAM up to 10x GPU Card - Piospartslap
GIGABYTE G431-MM0 High-Performance Computing 4U Server Up to 10 x PCIe Gen3 GPU 4x SFF 2 5 Zoll AMD EPYC Embedded 3151 SoC CPU 4C 2,7GHz
www.piospartslap.de
Zum Vergleich: Bei Ram König kostet das Board mit ATX Adapter alleine aktuell ~60€.
Der Preis ist phantastisch, wenn man sich anschaut, was manche hier an Adaptern betreiben und investieren, um PCIe-Slots zu realisieren.
Edit:
Ich möchte ergänzen, dass ich das Gehäuse und generell das System sogar äußerst interessant finde. Drei redundante 80+ Platinum Netzteile, dazu vier mal 2,5" HotSwap und eben 10 PCIe-Slots. Die drei 120mm Lüfter mit >8000 U/min sind zwar sicherlich nicht wirklich "Home-Server-tauglich", aber da sehe ich das geringste Problem, das umzubauen. Auch für den Lüfter auf der CPU finden sich ja bereits hier im Thread zahlreiche Alternativen. Mit 700mm Tiefe halt auch ein Brett für daheim, aber wenn ich so sehe, was einige hier so im Bilder-Thread zeigen, dürfte das wenige abschrecken
Edit:
Ich möchte ergänzen, dass ich das Gehäuse und generell das System sogar äußerst interessant finde. Drei redundante 80+ Platinum Netzteile, dazu vier mal 2,5" HotSwap und eben 10 PCIe-Slots. Die drei 120mm Lüfter mit >8000 U/min sind zwar sicherlich nicht wirklich "Home-Server-tauglich", aber da sehe ich das geringste Problem, das umzubauen. Auch für den Lüfter auf der CPU finden sich ja bereits hier im Thread zahlreiche Alternativen. Mit 700mm Tiefe halt auch ein Brett für daheim, aber wenn ich so sehe, was einige hier so im Bilder-Thread zeigen, dürfte das wenige abschrecken
Zuletzt bearbeitet:
Für was soll man das Gigabyte G431-MM0 Server noch nutzen können, außer Mining? Spontan habe ich keine Ideen wozu das nützlich wäre🤔 Die PCIe können bestimmt kein Bifurkation, sodass man 10x 4x PCIe x4 hätte und somit 40 m2 SSDs einbauen könnte 😅
Da würde dann aber die PCIe des Boards und die CPU wahrscheinlich etwas limitieren 🤔
Da würde dann aber die PCIe des Boards und die CPU wahrscheinlich etwas limitieren 🤔
Die ganzen PCIe Steckplätze in dem Server müssen Bifurcation können, mit nem extra Chip. Sonst würden ja mehrere Grafikkarten gar nicht laufen.
Der Port auf dem Board für sich allein kann das nicht.
Und ja der Port würde limitieren.. ist halt nur PCIe 3.0 8x und der kleine ist 4x... Ich seh da auch keinen Sinn außer Mining.
Der Port auf dem Board für sich allein kann das nicht.
Und ja der Port würde limitieren.. ist halt nur PCIe 3.0 8x und der kleine ist 4x... Ich seh da auch keinen Sinn außer Mining.
Ich hab zwei von den Gigabyte Kisten hier stehen. Die PCIe Slots sind jeweils nur mit einer Lane angebunden.
Die System Lüfter lassen sich gut drosseln, da ist der kleine Quirl im Netzteil und der CPU Lüfter lauter.
Einzig bei Neustart drehen die Lüfter für 1 Minute oder so mal auf um dann auf den eingestellten Wert gedrosselt zu werden.
Ich hab eine Kiste als NVME Raid laufen; normale m.2 SSDs mit Adapter direkt in den Slot gesteckt.
Im moment limitiert da aber noch meine Nic, die Intel x540-T2 schafft über eine Lane nur knapp 200 MByte/sek.
Warte gerade noch auf eine andere Nic und Adapter um den onboard m.2 zu konvertieren 😁
Bezüglich dem Board mit dem kaputten IPMI bin ich noch nicht weiter, der Nand mit der Firmware ist im Chip integriert, nur ein Austausch des Chips hilft; die Uart wirft Fehler, Konfiguration nicht möglich. Und alle anderen flashbaren Chips hab ich schon ausprobiert, hilft nix.
Die System Lüfter lassen sich gut drosseln, da ist der kleine Quirl im Netzteil und der CPU Lüfter lauter.
Einzig bei Neustart drehen die Lüfter für 1 Minute oder so mal auf um dann auf den eingestellten Wert gedrosselt zu werden.
Ich hab eine Kiste als NVME Raid laufen; normale m.2 SSDs mit Adapter direkt in den Slot gesteckt.
Im moment limitiert da aber noch meine Nic, die Intel x540-T2 schafft über eine Lane nur knapp 200 MByte/sek.
Warte gerade noch auf eine andere Nic und Adapter um den onboard m.2 zu konvertieren 😁
Bezüglich dem Board mit dem kaputten IPMI bin ich noch nicht weiter, der Nand mit der Firmware ist im Chip integriert, nur ein Austausch des Chips hilft; die Uart wirft Fehler, Konfiguration nicht möglich. Und alle anderen flashbaren Chips hab ich schon ausprobiert, hilft nix.
Zuletzt bearbeitet:
Wird das dann nur per PCIe 1.0 angesprochen?! PCIe 3.0 sollte ja pro Lane um die 10gbit schaffen.
Also, der Gigabyte G431-MM0 bietet laut Produktseite Anbindungen mit PCIe3 x1. Allerdings kann die x540-T2 wohl nur PCIe2, bei nur einer Lane bedeutet das also ~500 MB/s, könnte natürlich sein, dass die Karte diese nun auf die beiden RJ45 aufteilt 
Haldi
Enthusiast
- Mitglied seit
- 10.06.2012
- Beiträge
- 535
Und verhindert ASPM tiefere idle C zustände des Boards/CPU.
Aber ja günstig sind die.
Pci-e 3.0x4
Aber 8TB SSDs sind nicht bezahlbar. Also bleiben noch 4TB für 200€ oder 2TB für 120€ (ca...) übrig.
IMHO sofern nicht ein ganz spezifisches anwewendungszenario vorhanden ist tuts HDD mit SSD caching wesentlich günstiger.
Aber ja günstig sind die.
Pci-e 3.0x4
Beitrag automatisch zusammengeführt:
Ich finde die Idee dahinter ja eigentlich wirklich cool...
Aber 8TB SSDs sind nicht bezahlbar. Also bleiben noch 4TB für 200€ oder 2TB für 120€ (ca...) übrig.
IMHO sofern nicht ein ganz spezifisches anwewendungszenario vorhanden ist tuts HDD mit SSD caching wesentlich günstiger.
Woher hast du das denn? Ich hab hier zwei Connect X4 im Betrieb, und kann das nicht bestätigen.
andrer250282
Experte
- Mitglied seit
- 05.10.2015
- Beiträge
- 336
Bei der X4 ist das auch besser geworden, die Empfehlung war ja eine X3
millenniumpilot
Enthusiast
ich habe eine X3 im Einsatz und komme auf C6.
Aber jetzt mal allgemein gefragt, hat eigentlich jemand bei dem Board ASPM zum Laufen gebracht?
Ich habe jetzt mal etwas rum probiert, und konnte mit keiner PCIe karte ASPM zum laufen bringen. Nutze TrueNAS Scale. Im kernel ist aspm natürlich aktiviert.
Ich habe jetzt mal etwas rum probiert, und konnte mit keiner PCIe karte ASPM zum laufen bringen. Nutze TrueNAS Scale. Im kernel ist aspm natürlich aktiviert.
ASPM ist im BIOS standardmäßig deaktiviert. Wenn man das ändern will muss man das BIOS modden.
Kann sein das es im F02 noch an ist. Da werfen mir nämlich beide Intel Onboard-NICs permanent Fehler im Terminal. Die NICs deaktivieren hilft, aber ist nicht so richtig zielführend.
Scheint aber nen allgemeines Problem zu sein, da findet man im Internet so etliche Einträge zu für Zen allgemein. Deswegen wurde das irgendwann mal mitm AGESA Update std. deaktiviert.
Wüßte auch nicht warum ne ConnectX3 die C-States der CPU behindern sollte. Wär mir auch noch nie aufgefallen. Und ich guck beim rumtesten über beide Boards ständig nach dem Stromverbrauch.
Kann ich aber auch nochmal testen.
Kann sein das es im F02 noch an ist. Da werfen mir nämlich beide Intel Onboard-NICs permanent Fehler im Terminal. Die NICs deaktivieren hilft, aber ist nicht so richtig zielführend.
Scheint aber nen allgemeines Problem zu sein, da findet man im Internet so etliche Einträge zu für Zen allgemein. Deswegen wurde das irgendwann mal mitm AGESA Update std. deaktiviert.
Wüßte auch nicht warum ne ConnectX3 die C-States der CPU behindern sollte. Wär mir auch noch nie aufgefallen. Und ich guck beim rumtesten über beide Boards ständig nach dem Stromverbrauch.
Kann ich aber auch nochmal testen.
Zumindest bei diesem Board wird das denke ich ziemlich egal sein, da es sowieso nur 3 C-States gibt. Das ist wohl eher ein Problem wenn es 7-8 States gibt.
Bei mir sieht es zum Beispiel so aus:
Zumindest mit dem Original BIOS ist ASPM aber definitiv deaktiviert. Also nicht nur die PCIe Karten, sondern auch alle internen Geräte. Auch pcie_aspm=force bringt da nichts.
Bei mir sieht es zum Beispiel so aus:
Zumindest mit dem Original BIOS ist ASPM aber definitiv deaktiviert. Also nicht nur die PCIe Karten, sondern auch alle internen Geräte. Auch pcie_aspm=force bringt da nichts.
Zuletzt bearbeitet:
Zen hat allgemein nur 3 P-States.
Braucht auch nicht wirklich mehr wenn die Kerne die meiste Zeit im C6 sind.
Das deaktivieren der Onboard-NICs drückt den Verbrauch aber definitiv noch runter. Hab da wegen diesen dussligen Fehlern die letzten Tage viel rumprobiert.
Das blöde ist halt das der SoC in der CPU halt das meiste verbraucht und man die Spannung nicht einstellen kann.
Wenn man hier aber mit dem RAM Takt runter geht verringert sich auch die SoC Spannung pro Stufe um 50mV, was schon ne ordentliche Einsparung bringt.
Hab dafür immer nochn Windows auf ner SSD am laufen wo man das in HWinfo nachverfolgen kann und eben auch die P-States per Software ändern kann.
Braucht auch nicht wirklich mehr wenn die Kerne die meiste Zeit im C6 sind.
Das deaktivieren der Onboard-NICs drückt den Verbrauch aber definitiv noch runter. Hab da wegen diesen dussligen Fehlern die letzten Tage viel rumprobiert.
Das blöde ist halt das der SoC in der CPU halt das meiste verbraucht und man die Spannung nicht einstellen kann.
Wenn man hier aber mit dem RAM Takt runter geht verringert sich auch die SoC Spannung pro Stufe um 50mV, was schon ne ordentliche Einsparung bringt.
Hab dafür immer nochn Windows auf ner SSD am laufen wo man das in HWinfo nachverfolgen kann und eben auch die P-States per Software ändern kann.
Die Sideffects, die man sich mit Stromsparmaßnahmen bei diesem Board einhandelt, sind imho den marginalen Effekt an der Steckdose nicht Wert. Wer einen stromsparenden Server möchte, sollte einen Bogen um Epycs/Threadripper/Ryzen mit ECC machen und sich einen Intel N100 oä nehmen. Da klappt das auch sauber mit tiefen C-States und ASPM.
Ceiber3
Urgestein
IDLE Verbrauch war halt nie AMD ihre Stärke. Dafür verbrauchen sie nicht viel unter Last. 25/30 Watt ohne HT mit rund 45 Watt.
Wenn man Overclocking bis auf das Max was geht einstellt "3,9/4 Ghz", hat man sogar ein Verbrauch von rund 80 Watt nur für die CPU. Ansonsten Stock finde ich die vom Verbrauch her schon gut. Mein Synology verbraucht auch über 40 Watt im IDLE mit dem Ryzen v1500b.
Wenn man Overclocking bis auf das Max was geht einstellt "3,9/4 Ghz", hat man sogar ein Verbrauch von rund 80 Watt nur für die CPU. Ansonsten Stock finde ich die vom Verbrauch her schon gut. Mein Synology verbraucht auch über 40 Watt im IDLE mit dem Ryzen v1500b.
Bin auch bei unter 30W Idle ohne HDDs, aber mit 10G ConnectX3. Da kann ich gut mit leben.
C-States der CPU Kerne funktionieren auch seit jeher sauber. Beim SoC bin ich mir da unsicher..
@sch4kal welche Sideeffects meinst du genau? Bzw. welche Stromsparmaßnahmen?
Wirklich viele Optionen hat man ja nicht
C-States der CPU Kerne funktionieren auch seit jeher sauber. Beim SoC bin ich mir da unsicher..
@sch4kal welche Sideeffects meinst du genau? Bzw. welche Stromsparmaßnahmen?
Wirklich viele Optionen hat man ja nicht
Haldi
Enthusiast
- Mitglied seit
- 10.06.2012
- Beiträge
- 535
Hatte das Thema hier schon:
[Kaufberatung] - Server in Richtung stromsparend umbauen.
Moin! Folgender Server: Supermicro X10SRL-F, Xeon E5 2340V4, 128GB RAM, 1x SSD, 6x 4TB Seagate IronWolf NAS HDD im RAIDZ1, 1x Mellanox ConnectX-3. Hier läuft nur TrueNAS Core, keine VMs, Jails oder Plugins. Der Kasten braucht im idle knapp 70W, ich kann mit TrueNAS die Drives nicht schlafen...
www.hardwareluxx.de
Luckysh0t
Enthusiast
Das habe ich die Tage auch gemacht, einer der für mich etwas nicht nachvollziehbaren Sideeffects war, dass ich meinen PVE nicht mehr erreichen kann.
Obwohl ich die onboard Nics abseits der IPMI Schnittstelle gar nicht nutze - die auch dennoch weiterhin funktioniert hat. Schalte ich die beiden wieder im BIOS an, gehts wieder..
Soviel dazu ^^.
