[Sammelthread] Gigabyte MC12-LE0 (AM4, B550, servertauglich: IPMI, Dual Lan, ECC)

Vorvorwort:
Danke an @pumuckel für das ursprüngliche Erstellen des Threads. Ich habe mich bereit erklärt den Thread zur Pflege zu übernehmen und um neue Inhalte zu ergänzen. Der ursprüngliche starter bleibt vorerst als Spoiler im letzten Abschnitt angehängt, damit keine Inhalte verloren gehen.

Vorwort:
Erstmalig in Erscheinung ist das Gigabyte MC12-LE0 kurz vor Weihnachten 2023 auf mydealz getreten. Mit einem Preis von 50€ Neuware war (ist) es ein no-brainer um noch einen günstigen Server auf AM4-Basis zusammen zu stellen. Aktuell (21.10.2024) liegt der Preis bei ~60€, wobei es in der Vergangenheit zwischen 80 und 30 € für Neuware geschwankt hat. Ähnliche Boards (AsRock Rack) und auch der Nachfolger MC13 liegen meist bei >300 €.

Von Gigabyte ist es als mATX Enterprise-Workstation-Motherboard eingestuft und eignet sich insbesondere wegen IPMI/BMC auch für den Servereinbau.

Eine nett gemeinter Hinweis vorweg: Wenn du neu bist wärst du nicht der erste, welcher mit dem Updateprozess (BMC & BIOS) und der Hardwareauswahl (Kompatibilität) Probleme hättest. Lies gerne den Starter, bevor du mit Planung und Umsetzung startest.

Viele Dinge werden auch im Thread diskutiert, es ist jedoch mein Bestreben die wichtigsten Dinge im Starter als zentrales Nachschlagewerk zu sammeln und würde dich bitten zunächst einmal dort nach deinem Problem zu suchen oder auch die Suchfunktion des Threads nach ähnlichen Beiträgen zu nutzen. Ich bin über jeden Hinweis zu fehlenden Inhalten im Starter dankbar und ergänze dieser gerne.



Inhaltsverzeichnis​

  1. Das Angebot
  2. Technische Daten
  3. Prozessor Support
  4. Anleitungen & Guides
    1. BIOS und BMC Update
    2. Reset BMC Passwort
  5. Bekannte Probleme
  6. FAQs
  7. Verbrauchswerte
  8. Linksammlung
  9. Vorheriger Starter


1. Das Angebot Nach oben

Das Board ist alleine oder oft für wenige Euro mehr mit einem kleinen Gelid Kühler erhältlich. Erster Händler, welcher es zu einem sehr günstigen Preis angeboten hat war piospartslab über ebay bzw. den eigenen Onlineshop. In beiden Fällen konnte man in Kombination mit Gutscheincodes nochmals günstigere Preise erreichen. Die meiste Zeit ist/war dieser Händler auf einem der Verkaufswege am günstigsten und ist nicht bei geizhals gelistet.
Wenn einem das Board zusagt, jedoch weniger Leistung braucht oder noch weniger ausgeben möchte und bastelwillig ist kann ein Blick auf das Nachbarboard mit SoC quadcore Epyc MJ11-EC1 lohnen.

In der Vergangeheit gab es sowohl bei eBay al sauch Piospartslab immer mal wieder Rabattgutscheine.
Erste Erwähnung im Luxx:


2. Technische DatenNach oben


880-png.960381
mc12-le0_blockdiagram-1027390689-png.1035466

  • mATX B550 AM4 Board für 3000-5000 AMD Ryzen (Achtung: keine 3000er Zen+ Picasso!)
  • bis zu 128 GB unbuffered (UDIMM) ECC oder non ECC (DDR4 2133-3200) (Achtung: KEIN registred/RDMM und KEIN LRDIMM!)
  • 2 x 1GbE LAN ports (Intel® I210-AT)
  • 1 x 10/100/1000 dedizierter management LAN port
  • Integrated in Aspeed® AST2500
    • "mini" onboard GPU zur Administation
    • 2D Video Graphic Adapter with PCIe bus interface
      1920x1200@60Hz 32bpp
  • Erweiterungsslots
    • 1 x PCIe 4.0 x16 (Gen4 x16 bus)slot from CPU
      • CPUs: Bitfuraction 8/8, 8/4/4 und 4/4/4/4 möglich
      • APUs: Bitfuraction nur 8/8 und 8/4/4 bzw 4/4/8 möglich
    • 1 x PCIe 4.0 x4 (Gen4 x4 bus)slot from CPU
      • (im Gegensatz zu anderen Boards direkt von der CPU = weniger Latenz und Probleme) ... die meisten Boards nutzen die Anbindung für die NVMe [@pumucke]
    • M.2 slot (über Chipsatz angebunden):
      • M-key
      • PCIe 3.0 x1 (max brutto 0,97 GByte/s)
  • Aspeed® AST2500 management controller
    GIGABYTE Management Console (AMI MegaRAC SP-X) web interface
    • Dashboard
    • HTML5 KVM
    • Sensor Monitor (Voltage, RPM, Temperature, CPU Status …etc.)
    • Sensor Reading History Data
    • FRU Information
    • SEL Log in Linear Storage / Circular Storage Policy
    • Hardware Inventory
    • Fan Profile
    • System Firewall
    • Power Consumption
    • Power Control
    • LDAP / AD / RADIUS Support
    • Backup & Restore Configuration
    • Remote BIOS/BMC/CPLD Update
    • Event Log Filter
    • User Management
    • Media Redirection Settings
    • PAM Order Settings
    • SSL Settings
    • SMTP Settings
  • nur bedingt für normale Desktop Systeme zu empfehlen
    • sehr wenig I/O-Ports (2x USB 3.1)
    • VGA nur für onboard Grafik, keine Bildausgabe einer APU
    • kein onboard Sound


3. Prozessor SupportNach oben

  • [Herstellerseite] Download: QVL Liste (mehr aber nicht alle CPUs aus der Tabelle unten)
  • Bei den 3000er Picasso APUs könnte man wegen der Namensgebung vermuten, dass sie laufen. Tun sie aber nicht (Zen+)
ACHTUNG: Die Tabelle vertauscht immer wieder die Spalten APU und ECC! Ich arbeite an der Fehlersuche.

CPUPassmark
multicore
Passmark
singlecore
Support?APUECC (+/Nein)iGPU
Intel N10055041943Nein
i5-850095812452Nein
3100115982420QVL-+
4650G Pro161662653QVLAPU++
3600177482567QVL-+
3600x189192652QVL-+
i5-12400193633519Nein
E5-2690v4194702074Nein
5500 (kein ECC)193983058APUAPUNeinN
5600G (kein ECC)198743190APUAPUNein+
5650G Pro207713252yAPU++
5600215763258y-+
5600x218883361QVL-+
3700x225422660QVL-Nein
5700 (kein ECC)242683250?APUNeinN
5700x266583382y-+
i5-13500318543884Nein
3900x326202706y-+
5950x455993468QVL, *Kühlung beachten-+

Grafischer Vergleich (danke @Haldi):
1730624072696.png


*Beim 5950X und teilweise auch anderen "großem" CPUs mit vielen Kernen wurde von Instabilitäten berichtet, da die Spannungsversorgung wohl realativ knapp bemessen ist. Unterschiedliche Nutzer haben die CPU mit unterschiedlichen Methoden stabil bekommen:
  • Wasserkühlung
  • Top-Blower (Thermalright baut große, leise)
  • Undervolting
  • Begrenzung der Leistungsaufnahme (PBO?)
  • hoher Airflow im Gehäuse
  • die Spannungswandler sind beim silbernen Kühlkörper links unter dem CPU Sockel (stimmt das?)


4. Anleitungen / GuideNach oben

4.1 UpdatesNach oben

Treiber, BIOS/UEFI und Firmware Updates gibt es auf der Herstellerseite.
Es gibt zwei Möglichkeiten das BIOS und die BMC Firmware zu upgraden: per UEFI oder BMC. Ich habe nur letzteres verwendet, andere finden das Update per UEFI einfacher.

per BMC:
  • eine unterstütze CPU einsetzen (bei mir ging es auch mit einem 5650G, welcher nicht auf der QVL steht)
  • einen Ramstick in Slot A1
  • Managment Lan mit Router verbinden
  • Board Starten (es muss laufen für den Update Prozess)
  • IP des Managment Interfaces Herausfinden (z. B. über ein fritzbox Menü)
  • mit der IP mit einem anderen Recher im gleichen Netzwerk verbinden
  • die Zugangsdaten stehen auf dem Karton und auf dem x16 PCIe Slot
  • die Flashvorgänge können bis zu 15 Minuten dauern, in der Zeit auf keinen Fall vom Strom trennen!
  • bei mir war nach erfolgreichem BIOS Update ein komplett stromlos machen des Boards für mehrere Minuten erforderlich
  • wenn man nur eine CPU hat, welche erst ab einerhöheren BIOS-Version unterstützt wird wäre meine Präferenz zuerst das BIOS zu updaten (wegen möglichem "BMC Passwort Brick")
  • BIOS Update
  • BMC Update
per UEFI (von @pumuckel):
  • eine CPU die auf der QVL ist einsetzen (aber die meisten 3er und 5er non -APUs klappen)
  • einen Ramstick in Slot A1 (hier sind 2133er wohl problemfreier als 3200er)
  • Tast/Maus/mon anschließen
  • System starten und abwarten (erster Start dauert etwas)
  • Achtung: der Browser sollte keinen Popup/script Schutz haben (notfalls einfach kurz ausmachen)
  • dann entweder per BMC oder per UEFI den BMC updaten (kann locker > 15 Min dauern, achtet auf die grüne "Heartbeat LED") - Full Flash
  • dann (wenn nötig) kurz restarten
  • dann das Bios entweder per BMC oder per UEFI updaten
  • dann runterfahren
  • Power trennen vom Board für 1-2 Minuten (aka das Netzteil abziehen)
  • nach 1-2 Minuten wieder anstecken und Spass haben

4.2 Reset BMC PasswortNach oben

Bei mir konnte ich mich bei einem von drei Boards nach einem BMC Update nicht mehr einloggen. Andere berichten von ähnlichen vorfällen. Ein Rücksetzen des BMC-Passwortes brachte abhilfe.

Ich habe gerade keine Zeit einen ganzen Guide zu machen, aber dir PDF dort sollte helfen:

to-DO:


5. Problembehandlung Nach oben

  • Reset BMC-PW
  • 5950X Abstürze


6. FAQsNach oben

  • Lüfterprofil
  • Stromverbrauch zu hoch (im BIOS gemessen, Systeamatisches Abklemmen von Komponenten, Minimalkonfiguration, 30W Thread)
  • KVM-Konsole öffnen
  • Web-BIOS aufrufen


7. VerbrauchswerteNach oben

  • 5600x Idle: 22W
  • 5650G Idle: 16W
  • die Liste soll später ergänzt werden, evtl. auch als Tabelle oder Online Sheet
Low Power Fetischisten könnten im folgenden Link Inspiration suchen. Wie man an den beiden Messwerten erkennen kann ist das MC12 bisher eher durch einen erhöhten Verbrauch (wegen dem BMC und u. A. den chiplet CPUs) aufgefallen.


8. LinksammlungNach oben



9. Früherer StartbeitragNach oben

Danke an @pumuckel für das ursprüngliche Erstellen des Threads. Ich habe mich bereit erklärt den Thread zur Pflege zu übernehmen und um neue Inhalte zu ergänzen. Der ursprüngliche Starter bleibt hier vorerst (oder auch für immer) angehängt, damit keine Inhalte verloren gehen.
------------- Vorwort, Credits und Angebote

Vorwort:


Wer mir ein vergleichbares NEUWARE Mainboard zu dem Preis mit den Features nennen kann, der darf dies gern tun.... bisher fand ich keines unter 200-400€
hingewiesen darauf hat @sch4kal zuerst im Marktplatz Link Thread

Vergleichbare MBs (ab 390€ mit PCIe 4.0):





Unterstützte CPUs: AMD 3000er und 5000er (und mit F15 wohl auch APUs mit intern - aka für VMs nutzbarer aber nicht extern - nutzbarer IGP)

Bestpreise lagen um die 35€ für das Board (ultra low war mal 27€ bei 4 Stück inkl kühler)


mit low profile Kühler:


ohne low profile Kühler

(hier die Gutscheine beachten!)



im Webshop von Pio (Ergänzung auf Userwunsch):

(hier die Widerrufsbelehrung beachten!)





------------- Zur Hardware

Gigabyte Mainboard MC12-LE0​


880.png


MC12-LE0_BlockDiagram-1027390689.png



mAtx B550 Am4 Board für 3000-5000er AMD CPUs
bis zu 128GB unbuffered ECC oder non ECC (DDR4 2133-3200) (ACHTUNG: KEIN REGISTERED ECC sondern unbuffered ECC)

2 x 1GbE LAN ports (Intel® I210-AT)
1 x 10/100/1000 management LAN

Integrated in Aspeed® AST2500
2D Video Graphic Adapter with PCIe bus interface
1920x1200@60Hz 32bpp


Expansion Slots

1 x PCIe x16 (Gen4 x16 bus) slot from CPU (Bifurcation 4/4/4/4 fähig mit NON -APUs)

Kommentar: setzt hier also normale CPUs ein . der 5600 (non x) ist imho hier ein sweetspot oder auch ein gebrauchter 3600x/3700x/3900x ...
generell würde ich bei 65W CPUs bleiben oder entsprechend die CPU limitieren (cTPU)

APUs können keine 4/4/4/4 bifurcation

1 x PCIe x4 (Gen4 x4 bus) slot from CPU (im Gegensatz zu anderen Boards direkt von der CPU = weniger Latenz und Probleme)
... die meisten Boards nutzen die Anbindung für die NVMe


1 x M.2 slot (über Chipsatz angebunden): (imho gut für ne kleine 128/256GB M2 SSD fürs OS - sowas bekommt ja nachgeworfen aus EDU stores und viele davon haben oft eh nur 2x PCIe 3.0)
- M-key
- PCIe Gen3 x1 (max brutto 0,97 GByte/s)
- Supports NGFF-2242/2280 cards




Board Management

Aspeed® AST2500 management controller
GIGABYTE Management Console (AMI MegaRAC SP-X) web interface


  • Dashboard
  • HTML5 KVM
  • Sensor Monitor (Voltage, RPM, Temperature, CPU Status …etc.)
  • Sensor Reading History Data
  • FRU Information
  • SEL Log in Linear Storage / Circular Storage Policy
  • Hardware Inventory
  • Fan Profile
  • System Firewall
  • Power Consumption
  • Power Control
  • LDAP / AD / RADIUS Support
  • Backup & Restore Configuration
  • Remote BIOS/BMC/CPLD Update
  • Event Log Filter
  • User Management
  • Media Redirection Settings
  • PAM Order Settings
  • SSL Settings
  • SMTP Settings

------------- Kühlerempfehlung

Top Blow der die Spawas links unter dem CPU Sockel abdeckt (Thermalright baut nette)
.. damit ist der silberne Kühlkörper links unter dem CPU Sockel gemeint

------------- Bios, BMC Firmware, Treiber

offizielle:

BMC: 12.61.21
Bios: F15


hier: https://www.gigabyte.com/de/Enterprise/Server-Motherboard/MC12-LE0-rev-1x#Support



die einfachste Weise das Board auf den aktuellen Stand zu bringen:

eine CPU die auf der QVL ist einsetzen (aber die meisten 3er und 5er non -APUs klappen)
einen Ramstick in Slot A1 (hier sind 2133er wohl problemfreier als 3200er)
Tast/Maus/mon anschließen
System starten und abwarten (erster Start dauert etwas)

Achtung: der Browser sollte keinen Popup/script Schutz haben (notfalls einfach kurz ausmachen)

dann entweder per BMC oder per UEFI den BMC updaten (kann locker > 15 Min dauern, achtet auf die grüne "Heartbeat LED") - Full Flash
dann (wenn nötig) kurz restarten
dann das Bios entweder per BMC oder per UEFI updaten
dann runterfahren
Power trennen vom Board für 1-2 Minuten (aka das Netzteil abziehen)
nach 1-2 Minuten wieder anstecken und Spass haben



es geht auch komplett per BMC aber für viele ist das schwieriger als es rein mit CPU und Ram gleich zu machen
ich z.B. hab grad 2 Boards von F06 (Auslieferungszustand) direkt auf aktuelle BMC und BIOS F15 per BMC (mit CPU/Ram eingesetzt) ohne Probleme geupdated (21-9-2024)


------------- Reset des BMC Passwort



... hier das PDF beachten


------------- Q&A


Passmark Scores ausgewählter CPUs zum Vergleich :

i5-8500: 9581 (6 Core S1151)
3600: 17776 (Zen2)
3600x: 18227 (Zen2)
i5-12400: 19557
E5-2690v4 : 19619 (S2011-3)
5600: 21592 <------ P/L

5600x: 21926
3700x: 22598 (Zen2)
5700x: 26738
i5-13500: 32250
3900x: 32678 (Zen2)
5950x: 45633 (hier muss aber wohl manuell die Spannung begrenzt werden (glaube unter 1,4V)) - aber gute Performance/W/€


------------- Links zu anderen Forendiskussionen


STH: https://forums.servethehome.com/ind...oard-mc12-le0-re1-0-amd-b550-am4-ryzen.42579/
L1T: https://forum.level1techs.com/t/gigabyte-mc12-le0/183692/21



------------- User Anmerkungen (selbst nicht geprüft)

@BobbyD:
  • Das BMC Passwort steht auf dem (Anmerkung: brauner Außenkarton an der Seite) Karton
  • Fürs BMC-Update über das BMC ist folgende Datei auszuwählen: "rom.ima_enc" Mode:BMC
  • Fürs BIOS-Update über das BMC ist folgende Datei auszuwählen: "image.RBU" Mode:Bios
#
#
 
Zuletzt bearbeitet:
Mein Aufbau ist abgeschlossen. Bin sehr zufrieden.

IDLE Verbrauch an der Steckdose 31Watt: Mit Seasonic SSP-350 , Ryzen Pro 4650G, 10GBit Ethernet (Mellanox COnnectX-3), 48G DDR4 ECC, 6 Gehäuselüftern (4x 40mm, 2x 30mm),1x NVME Corsair MP510, 1x 2,5" HDD, 5x 2,5" SSD

EDIT: Lüfter optimiert, ILDE jetzt 28 Watt. Olé.

Mit einem ASRock B450M Pro4 und einem DeLock 2xSATA PCI-Adapter waren es 23 Watt mehr. Ouch.

Bin einmal auf die Nase gefallen. Stecken 2 identische RAM-Module in A0 und B0, startet das System überhaupt nicht. Stecken Sie in A1 und B1, ist es kein Problem. Im Handbuch steht rein garnichts zu einer erforderlichen oder empfohlenen Anordnung.
 
Zuletzt bearbeitet:
Wenn Du diese Anzeige nicht sehen willst, registriere Dich und/oder logge Dich ein.
So, ich hab den Gelid jetzt gegen den XP90-53 getauscht in der günstigsten Version. Hat im Endeffekt jetzt von der Temperatur her weniger gebracht als erwartet unter Vollast. Vorher warens 95° beim 10min Stresstest (stress unter Linux), mit dem XP90 sinds jetzt 87° gewesen. Die Umgebungstemperatur war aber etwas höher würde ich vermuten (habs leider nicht mitgeloggt).

Insofern wär der XP120 doch interessant, hat aber bei mir im Gehäuse zu wenig Luft nach oben.
 
Durchaus möglich dass die Karte einfach (teil)defekt ist. Habe mehrere Exemplare gehabt und dabei gemischte Ergebnisse, siehe
Beitrag im Thema 'Gigabyte Mainboard MC12-LE0 AM4, IPMI, Dual Intel GB Lan ECC fähig'
https://www.hardwareluxx.de/community/threads/gigabyte-mainboard-mc12-le0-am4-ipmi-dual-intel-gb-lan-ecc-fähig.1347943/post-30256280
Danke für die Infos. Ich habe nun etwas rum probiert:

8x4x4x
  1. (1. Port) Samsung + (2. Port) Kingston -> nichts erkannt
  2. (1. Port) Samsung + nichts -> Samsung erkannt
  3. (1. Port) Kingston + (2. Port) Samsung -> Samsung erkannt
  4. 2x (1. Port) Samsung + (2. Port) Kingston -> Kingston erkannt
Der LSI wurde (immer?) erkannt. Habe auch durch leichtes nach oben halten bzw. unten hängen lassen getestet, ob die Erkennung ich ändert, keine Änderung feststellbar.

4x4x8x
  1. 2x (1. Port) Samsung + (2. Port) Kingston -> beide Erkannt!
  2. 2x (1. Port) Samsung + (2. Port) Kingston + LSI -> Nur Kingston erkannt
Nun blicke ich nicht mehr durch, bis erkenne keine Logik 😅

P.S: Beide LEDs leuchten wenn m2 vorhanden und 4x4x4x4x hat nichts erkannt (nicht das die BIOS Anzeige falsch ist).
 
@buyman
Welches Gehäuse nutzt du denn und wie wird das belüftet? Mein 3800X im Inter-Tech 3U-30248 (2x Noctua NF-A12x25, MSI x370 XPower Gaming Titanium, RX480 8GB) kommt mit dem Noctua NH-L9x65 auf gerade mal 82°C unter s-tui. Soviel schlechter sollte der Kühler nicht sein. Und meine CPU ist schon ne Heizplatte für sich. Entweder hast du nen schlechten 3700er erwischt (undervolting in BEtracht gezogen?) oder da muss mehr Luftdurchsatz ins Gehäuse.
 
So, mein MC12-LE0 ist jetzt zum Produktivsystem geworden. Läuft soweit alles super. Aufgrund der Erfahrungen hier, habe ich kein Stromsparwunder erwartet, bin aber doch etwas enttäuscht über den Verbrauch.

Ich bin jetzt bei ca. 58 Watt im Durchschnitt, CPU-Auslastung dümpelt irgendwo zwischen 0 und 2%. Das Setup sieht wie folgt aus:
Auf dem Server läuft Proxmox, aktuell laufen nur 3 Container und 6 VMs. Alles recht schlanke Debian-Systeme die überwiegend idlen.

Im Bios habe ich bislang die zwei onboard Nics deaktiviert. Mit den P-States / Power Governor usw. habe ich noch nichts ausprobiert. Nach dem was ich gelesen habe, war es teilweise so, dass die CPU zwar tiefer heruntertaktet, aber der Verbrauch minimal (wenn überhaupt) gesunken ist.

Seht ihr noch potential, ein paar Watt heraus zu kitzeln? ;-)

Vielen Dank und viele Grüße
 
Du koenntest mal den Output von `turbostat -i 5 -n 5` hier posten - da sieht man recht gut, ob was offensichtlich verkonfiguriert oder sonstwie in Schieflage ist.
 
Sehr gerne:
(Achso, der Eco-Mode ist im Bios aktiviert.)

Bash:
root@pve-core:[~]:turbostat -i 5 -n 5
turbostat version 2022.10.04 - Len Brown <lenb@kernel.org>
Kernel command line: initrd=\EFI\proxmox\6.8.8-2-pve\initrd.img-6.8.8-2-pve root=ZFS=rpool/ROOT/pve-1 boot=zfs
CPUID(0): AuthenticAMD 0x10 CPUID levels
CPUID(1): family:model:stepping 0x19:21:2 (25:33:2) microcode 0x0
CPUID(0x80000000): max_extended_levels: 0x80000023
CPUID(1): SSE3 MONITOR - - - TSC MSR - HT -
CPUID(6): APERF, No-TURBO, No-DTS, No-PTM, No-HWP, No-HWPnotify, No-HWPwindow, No-HWPepp, No-HWPpkg, No-EPB
CPUID(7): No-SGX No-Hybrid
RAPL: 234 sec. Joule Counter Range, at 280 Watts
/dev/cpu_dma_latency: 2000000000 usec (default)
current_driver: acpi_idle
current_governor: menu
current_governor_ro: menu
cpu9: POLL: CPUIDLE CORE POLL IDLE
cpu9: C1: ACPI FFH MWAIT 0x0
cpu9: C2: ACPI IOPORT 0x414
cpu9: cpufreq driver: acpi-cpufreq
cpu9: cpufreq governor: performance
cpufreq boost: 1
cpu0: MSR_RAPL_PWR_UNIT: 0x000a1003 (0.125000 Watts, 0.000015 Joules, 0.000977 sec.)
Core    CPU    Avg_MHz    Busy%    Bzy_MHz    TSC_MHz    IPC    IRQ    POLL    C1    C2    POLL%    C1%    C2%    CorWatt    PkgWatt
-    -    28    0.71    3870    3394    0.70    13891    60    2295    10873    0.00    0.23    99.08    1.40    15.34
0    0    34    0.87    3935    3394    0.61    868    2    200    713    0.00    0.35    98.79    0.26    15.34
0    8    58    1.43    4027    3394    0.81    2801    2    287    1515    0.00    0.40    98.19
1    1    29    0.76    3818    3394    0.49    707    2    191    572    0.00    0.20    99.06    0.20
1    9    24    0.64    3762    3394    0.42    892    16    95    814    0.01    0.12    99.26
2    2    47    1.17    4013    3394    1.17    944    1    175    776    0.00    0.30    98.55    0.26
2    10    37    0.96    3833    3394    0.55    1885    7    260    1693    0.00    0.29    98.78
3    3    20    0.54    3715    3394    0.36    732    4    158    567    0.00    0.39    99.08    0.15
3    11    21    0.55    3703    3394    0.33    813    2    119    710    0.00    0.26    99.21
4    4    21    0.56    3746    3394    0.41    633    1    161    520    0.00    0.34    99.11    0.11
4    12    12    0.34    3698    3394    0.35    292    1    78    244    0.00    0.18    99.49
5    5    30    0.74    4031    3394    0.73    486    20    59    382    0.01    0.05    99.22    0.12
5    13    26    0.60    4264    3394    2.22    430    0    95    344    0.00    0.14    99.26
6    6    34    0.92    3706    3394    0.40    1183    2    105    1043    0.00    0.12    98.99    0.20
6    14    21    0.55    3750    3394    0.47    519    0    75    433    0.00    0.30    99.16
7    7    16    0.42    3714    3394    0.34    377    0    154    277    0.00    0.13    99.46    0.11
7    15    12    0.33    3659    3394    0.41    329    0    83    270    0.00    0.10    99.57
 
Der ECO-Mode capped afaik nur, wie viel die CPU maximal gurgeln darf - auf die minimale Leistungsaufnahme hat er keinen Einfluss.

Deine CPU kann offenbar nicht in den niedrigsten Idle-State (C3) der Plattform wechseln, die Gruende dafuer koennen vielfaeltig sein. Ich weisz leider nicht, wie man die Ursache am Unaufwendigsten ermitteln kann. C3 zu erreichen koennte dir ggf. nochmal ein paar (aber sicher nur wenige) Watt sparen.
 
Zuletzt bearbeitet:
Ok, danke Dir! Dann muss ich vermutlich damit leben. In dem Screenshot hier sieht man übrigens schön, wie der Pegel um 5-10 Watt gestiegen ist, nachdem ich gegen 15 Uhr die VMs und LXCs umgezogen habe. Erstaunlich, da die Auslastung ja bei fast 0 liegt. Jetzt muss man dazu sagen, dass der Tasmota Stecker nicht haargenau kalibriert ist, aber wenn der reale Wert abweicht, dann zeigt er eher zu viel als zu wenig Verbrauch an.

grafana.png
 
Lies‘ Dir mal meinen Post durch und gebe mal Bescheid, wie viel sich bei Dir verändert hat:

Beitrag automatisch zusammengeführt:

Prüfe auch, ob Du ASPM aktiviert hast/aktivieren kannst. Das ist in den folgenden Beiträgen beschrieben.
 
@gromitnova
Schade. Also ohne die VMs bei 47WE ca.?
Zumindest testen könntest du mal ohne Lüfter. Gerade wenn man ältere, sehr viele oder leistungsstarke Lüfter (für Server) verwendet kann man dort eine Überraschung erleben.
Da du schreibst es sei bereits dein Produktivsystem wird es schwer mal die Komponenten abzuklemmen/einzeln zu testen, ob du dort irgendwo einen Ausreißer hast?
Ist es eine Vermutung, dass die HDDs nicht (oder gering) zum Verbrauch beitragen oder weist du du, dass sie tatsächlich im Stand-by sind?

Irgendwelche USB-Geräte hast du nicht vergessen abzustecken?

Wenn du eh keine PCIe 4.0 Karten (SSDs) verbaut hast verbaut hast: Bringt es etwas die Geschwindigkeit im BIOS auf PCIe 3.0 manuell für alles zu setzen?
 
Es ist ein normaler ATX Tower mit drei 120er Lüftern vorne und einen hinten. Da sie schon sehr herunter geregelt werden, bemerke ich keinen großen Unterschied, wenn ich sie im laufenden Betrieb abstöpsel. Ich kann dem aber nochmal im Detail nachgehen.

Da hast du recht, jetzt ist es etwas unpraktisch, noch viel auszubauen. Zumal meine erste Vermutung / Experiment die PCI-zu-NVME Karte von Asus wäre... da läuft aber nicht nur der Mirror für die VMs, sondern auch der Mirror für das Hostsystem selbst.

Die Festplatten sind sicher im standby (hdparm), die brauche ich nur selten, also lasse ich sie 30 Minuten nach jeder Benutzer wieder schlafen gehen.

Per USB ist nichts verbunden.

Das Herabsetzen auf PCIe 3.0 könnte ich mal testen. Irgendwie gefällt mir das zwar nicht so ganz... auch wenn es unsinnig ist. Aber ein guter Test wäre es. Danke erstmal für die Anregungen!
 
@gromitnova Ich verstehe den Ansatz nicht, Du hast doch das Problem, dass Du zu viel Strom verbrauchst und ein Ansatz ist, dass die CPU nicht in den richtigen IDLE State kommt.

Dafür habe ich eine Anleitung geschrieben. Schau einfach nur ein paar Beiträge weiter oben.

Zusätzlich kann es helfen ASPM zu aktivieren.

Damit sollte dann auch C6 erreicht werden.
 
Zusätzlich kann es helfen ASPM zu aktivieren.

Damit sollte dann auch C6 erreicht werden.
Das Board hat doch gar keine ASPM-Option im BIOS. :rolleyes2:
...zumindest nicht mit einem Monolithen. Es gibt allerdings leicht andere Optionen, wenn man einen Chiplet verbaut hat.
 
Deine CPU kann offenbar nicht in den niedrigsten Idle-State (C3) der Plattform wechseln, die Gruende dafuer koennen vielfaeltig sein.
An was erkennst du das?
Ich dachte Turbostats in dieser Version könne das bei amd Chips dieser Generation gar nicht erkennen?
 
@buyman
Welches Gehäuse nutzt du denn und wie wird das belüftet? Mein 3800X im Inter-Tech 3U-30248 (2x Noctua NF-A12x25, MSI x370 XPower Gaming Titanium, RX480 8GB) kommt mit dem Noctua NH-L9x65 auf gerade mal 82°C unter s-tui. Soviel schlechter sollte der Kühler nicht sein. Und meine CPU ist schon ne Heizplatte für sich. Entweder hast du nen schlechten 3700er erwischt (undervolting in BEtracht gezogen?) oder da muss mehr Luftdurchsatz ins Gehäuse.

Gehäuse ist ein Inter-Tech NAS-8, belüftet mit 3 Stück 80x80x10mm Lüftern aus China (https://de.aliexpress.com/item/1005005952005094.htm). Hier könnte ich sicher noch etwas optimieren mit besseren Lüftern. Und den 3700X undervolten ist sicher auch keine schlechte Idee. Die Vollkupfervariante vom Thermalright hätte sicher auch mehr gebracht. Ein ID-COOLING IS-55 würde von der Höhe her auch passen (im Gegensatz zum AXP120-67 und sicher auch besser kühlen. Aber ich denke nicht, dass der 3700X oft unter Vollast laufen wird im Server. Wobei, ausschließen möchte ich es nicht.

Den gesamten Build habe ich jetzt hier mal dokumentiert (auch für mich selbst):

Ist doch insgesamt jetzt mehr verbaut als gedacht. Jetzt müsste ich mich dann langsam auch um das MJ11-EC1 kümmern als nächstes Projekt :fresse2:
 
Lies‘ Dir mal meinen Post durch und gebe mal Bescheid, wie viel sich bei Dir verändert hat:

Beitrag automatisch zusammengeführt:

Prüfe auch, ob Du ASPM aktiviert hast/aktivieren kannst. Das ist in den folgenden Beiträgen beschrieben.
Ich habe es heute Abend mal ausprobiert. Die Kerne gehen jetzt teilweise bis 500Mhz runter. Die Spikes nach oben scheinen aber umso mehr "spürbar" zu sein. Jedenfalls sehe ich in Grafana plötzlich Ausschläge zwischen 90 und 100 Watt, die ich zuvor nicht hatte. So arg dürfte der CPU doch gar nicht reinhauen, wenn ich durch den Eco-Mode auf 45Watt begrenzt bin!?

Wie dem auch sei, mir ist dadurch aufgefallen, dass die Festplatten teilweise aus dem Standby herauskommen. Das war zuvor nicht so, als die beiden Platten (bzw. der ganze HBA) an eine VM durchgereicht wurde. Jetzt liegt das NAS auf einem LXC, vermutlich muss ich erst nochmal nachsteuern um sicherzugehen, dass die Platten auch schlafen bleiben.

Dann ist mir während der letzten zwei Tage aufgefallen, dass der Verbrauch laaaaangsam immer mehr ansteigt, erst war es so gegen 55 Watt, heute war der Durchschnitt schon bei 63 Watt. Ich kümmere mich nun erstmal um die Festplatten und werde später nochmal berichten. Erstmal: Vielen Dank für Deine / Eure Hilfen und Anregungen!

Geklärt: Beim Testen hatte ich vorhin das Macbook am Strom angeschlossen und so wollte Timemachine auf die NAS Laufwerke ein Backup anlegen. Das kann natürlich nicht gut gehen, wenn ich die Platten dann im Schlaf zwingen möchte.

Ich pendle mit den neuen Einstellungen zwischen 50 und 60 Watt, bewege mich aber meist an unteren Ende. Ich lasse es laufen und werde den Langzeitverbrauch/-durchschnitt abwarten. Ein durchschlagender Erfolg zeichnet sich bis jetzt aber nicht ab.
 
Zuletzt bearbeitet:
Ich habe heute mein MC12-LE0 bekommen.
Ich möchte es in meinem NAS mit einem Ryzen 4650G einsetzen.
Aktuell sind BIOS F06 und BMC 12.61.21 sowie ein Ryzen 2200G und 1x4GB DDR4-2666 in Slot A1 installiert.
Das BMC wird angezeigt, die Infos über CPU und RAM sind aber komplett falsch. Es wird ein Ryzen 3600 erkannt, sowie dieser RAM:
DIMM_P0_B0 : Hynix HMA81GU7AFR8N-UHPresence Detected
DIMM_P0_B1 : Hynix HMA81GU7AFR8N-UHPresence Detected
DIMM_P0_A0 : Samsung M391A1K43BB2-CTDPresence Detected
DIMM_P0_A1 : InnoDisk M4C0-8GS1LCSJ
Installiert ist wie gesagt nur ein Riegel - Corsair Ballistix.
Ich habe BIOS Updates auf F11, F13 und F14 per BMC durchgeführt und jeweils danach das System ausgeschaltet und einige Minuten gewartet.
Mit wird weiterhin BIOS F06 angezeigt und ich habe kein Videosignal, weder "physisch" noch via BCM H5Viewer.
Da ich kein Display Out bekomme kann ich kein anderweitiges Update versuchen.
Was kann ich tun?
Achja: ich habe auch einen Ryzen 3350G und zwei RAM-Sticks versucht.
Damit wurden (im Gegensatz zu jetzt) keine Sensoren erkannt. Ansonsten gleiches Prinzip.
 
@TheColin21
Wie bereits auf deinen vorherigen (gelöschten?) Post geantwortet: mit den beiden CPU startet das Board nicht, egal welches BIOS - da nicht unterstützt. Erst ab Ryzen 3000 mit CPUs mit Zen 2 Kernen. Die 3000er APUs kommen noch aus der Generation davor.

Die BMC Hardwareinformationen aktualisieren sich erst bei einem Start des Mainboard. Du brauchst eine andere CPU.
 
Danke... das war fast zu einfach
 
Habe jetzt noch weiter mit den scaling drivers und governors experimentiert. Mit amd_pstate=active bin ich mit 49 Watt zwar am tiefsten gekommen, aber die häufigen und dafür umso ausgeprägteren Spikes nach oben machen den Durchschnitt tatsächlich wieder hin. amd_pstate=passive mit unterschiedlichen governors waren in einer kleineren und stabileren Range, zeigten mir aber im Wattverbrauch dennoch ein höheres Ergebnis. Alles im kleinen Bereich.

Jetzt nutze ich wieder den acpi-freqcpu driver und teste dort die verschiedenen governors, tatsächlich kann ich es aber auch einfach bei performance belassen. Dies entspricht der default-Einstellungen und auch wenn die CPU nicht immer bei 3,4Ghz bleibt, ist der Stromverbrauch im Druchschnitt ähnlich. Dann ist der Mindestwert bei ca. 53 Watt und schwankt bis in die 60 Watt, geht aber auch nicht viel höher. Ich bin froh, dass ich es ausprobiert habe, aber zumindest zum jetzigen Stand, sehe ich (für mein Setup!) keine Vorteil in den Änderungen an den scaling drivers und governors.

Ich habe festgestellt, dass der Server meist ab ca. 12 Uhr bis am Nachmittag mehr Stromverbrauch hat, meist bleibt dann der Durschnittsverbrauch um 5-10 Watt höher. Dieses Verhalten hatte ich von gestern bis heute auch mit den amd_pstate=active Treiber. Temperatur der Umwelt schließe ich dabei eher aus, da die Lüfter unter jeglichen mir getesteten Zuständen immer bei 600rpm bleiben, dennoch werde ich da auch nochmal am Mittag genauer messen. Es kann aber auch sein, dass ich den Server im Laufe meiner täglichen Tests immer zwischen 23 und 0 Uhr neu starte und der Verbrauch in einer Zeit von x Stunden nach einem Reboot langsam immer mehr Strom benötigt. Aber woran könnte das wohl liegen? Ich könnte jetzt nochmal das CPU-Verhalten per bashscript über längere Zeit loggen, gehe aber nicht davon aus, dass ich hier Mittags eine Besonderheit feststelle, die parallel zu meinem erhöhten Stromverbrauch liegt. So ein Verhalten konnte ich mit meinem alten Proxmox Server nicht bemerken.

Insgesamt komme ich zu dem Fazit, dass ich mit diesem Server meine Zeit besser in andere Dinge investieren kann, als den Wattverbrauch im minimalen Bereich zu tunen. Vermutlich hätte ich in dieser Zeit andere Dinge im Haus gefunden, wie ich mehr Strom hätte einsparen können. Trotzdem sehr interessant, für den Moment versuche ich aber mit dem Thema abzuschließen. Lediglich der langsam (über viele Stunden) ansteigende Verbrauch muss noch geklärt werden. :)

Bislang bin ich ansonsten mit dem Board zufrieden. Das Mounten von ISO Images finde ich hier allerdings blöd bis unmöglich. Auch das es so lange dauert, wenn ich keine SMB Freigaben nutze. Vielleicht romantisiere ich meine Erinnerungen hier, aber das kenne ich von meinem über 10 Jahre alten Supermicro Board nicht so. Da musste ich nie einen USB-Stick auspacken.
 
Zuletzt bearbeitet:
Der Verbrauch wird durch die NVME SSD erzeugt, nicht durch die Adapter Karte. Solang da keine PCIE Switche drauf verbaut sind haben die keinen Einfluss auf den Verbrauch.
 
Aktuell wieder verdächtig nahe am Bestpreis (aktuell 37,43€, Bestpreis ohne Fehler war 33,99) mit mini Kühler erhältlich.
 
Hardwareluxx setzt keine externen Werbe- und Tracking-Cookies ein. Auf unserer Webseite finden Sie nur noch Cookies nach berechtigtem Interesse (Art. 6 Abs. 1 Satz 1 lit. f DSGVO) oder eigene funktionelle Cookies. Durch die Nutzung unserer Webseite erklären Sie sich damit einverstanden, dass wir diese Cookies setzen. Mehr Informationen und Möglichkeiten zur Einstellung unserer Cookies finden Sie in unserer Datenschutzerklärung.


Zurück
Oben Unten refresh