Low-Performance-ECC System - TrueNas Core

[eehm]

Hallo,

kann mir einer auf dem Gerbrauchtmarkt eine billige und stromsparende Plattform nennen um eine TrueNAS Core als Backup zu betreiben?
Festplattenplätze sind egal, weil ich das System so und so in ein neues Gehäuse umbauen würde.
Darauf sollten als Backup wohl 2 Pools laufen. Hier denke ich an 4 x 12TB Platten und je zwei dieser als Mirror betreiben, ggf. auch die 4 Stück als RaidZ1 ... da bin ich noch nicht ganz so sicher.

 

[pwnbert]

Sicherer als 2 Mirrors wäre ein Raid Z2, da können nämlich 2 beliebige Platten ausfallen. Wobei ich persönlich mit einem Z1 genug hätte, das Risiko in so kurzer Zeit 2 Platten zu verlieren ist doch eher klein.

5650G+550B+sparsamess NT+2x ECC RAM 3200+sparsame SSD = ~20W

Klick dich durch die anderen Threads der letzten Wochen, wurde ausreichend besprochen dort. Fragen stell nachher, dann werden diese nämlich genauer.

 

[Haldi]

Gigabyte MJ11-EC1 NAS Server

Bei Ram-König werden gerade ITX Mainboard's mit AMD EPYC 3151 für 69€ Verschleudert. Das Mainboard kommt Inkl. dem ATX Adapter versandkostenfrei. Leider hat das Mainboard keinen PCI-e Slot dafür. Jedoch einen M2 Slot und bis zu 16 SATA Laufwerke passen an das Mainboard. Als Speicher wird u.a...

www.hardwareluxx.de

[Sammelthread] - Dell PowerEdge T20

Dell PowerEdge T20 Der Dell PowerEdge T20 ist wahrscheinlich am besten als Workstation zu nutzen mit seinen 2x Displayports und dem ECC Support bietet er alles was man braucht. Der T20 kommt aber auch für den Einsatz als Server in Betracht. In der Xeon Variante bietet der T20 auch vPro und...

www.hardwareluxx.de

 

[eehm]

Gigabyte MJ11-EC1 NAS Server

Bei Ram-König werden gerade ITX Mainboard's mit AMD EPYC 3151 für 69€ Verschleudert. Das Mainboard kommt Inkl. dem ATX Adapter versandkostenfrei. Leider hat das Mainboard keinen PCI-e Slot dafür. Jedoch einen M2 Slot und bis zu 16 SATA Laufwerke passen an das Mainboard. Als Speicher wird u.a...

www.hardwareluxx.de

[Sammelthread] - Dell PowerEdge T20

Dell PowerEdge T20 Der Dell PowerEdge T20 ist wahrscheinlich am besten als Workstation zu nutzen mit seinen 2x Displayports und dem ECC Support bietet er alles was man braucht. Der T20 kommt aber auch für den Einsatz als Server in Betracht. In der Xeon Variante bietet der T20 auch vPro und...

www.hardwareluxx.de

Danke für deinen Tipp, ich habe mir mal ausführlich die Threads angeschaut.
Es scheint, dass der PowerEdge T20 zumindest im Idle stromsparender ist als der MJ11-EC1. Das wäre für mich schon mal von Vorteil.
Einerseits haben wir so und so schon eine aus meiner Sicht viel zu hohe Stromrechnung und mit weniger Verbrauch, entsteht auch weniger Abwärme und ich könne das Geräte ggf. sogar in ein 19" Gehäuse umbauen und schon in meinem Netzwerkschrank (16HE, 60 cm breit und tief) unterbringen.
Auf der anderen Seite ist die HW des T20 natürlich schon sehr alt und ggf. ist bald mit Ausfällen zu rechnen.
Kommen wir hier zum MJ11-EC1. Hierbei handelt es sich um ein neues Gerät.
Wisst ihr zufällig, ob man das Board dem Enterprise-Bereich zuordnen kann oder handelt es sich hierbei um ein "billiges" Consumer Board?

 

[Haldi]

isst ihr zufällig, ob man das Board dem Enterprise-Bereich zuordnen kann

Es hat eine Enterprise CPU fest verlötet
Die Dinger sind nur so günstig weil sie iwo aus ner riesigen Serverfarm ausgemistet wurden.

Was Stromverbrauch angeht... Der ist doch irrelevant.
Du sagtest ein Backup Server? Also läuft der täglich 15mins bis 1h Max bis das inkrementelle Backup der Snapshots erledigt ist und fährt dann wieder herunter oder?
Da würde sich sogar ne 2.5 / 5gbit oder gar 10gbit Netzwerk Karte lohnen damit das schneller passiert.


Btw TrueNAS Core wurde da nicht die Entwicklung eingestellt und nun alles auf Scale fokussiert?
Gibt's nen fixen Grund wieso du lieber die FreeBSD basierte Variante willst?

 

[eehm]

Du sagtest ein Backup Server? Also läuft der täglich 15mins bis 1h Max bis das inkrementelle Backup der Snapshots erledigt ist und fährt dann wieder herunter oder?

Ja, ich wollte ihn eigentlich laufen lassen um auch mal spontan Backups machen zu können ohne in den Keller zu Laufen, aber wahrscheinlich hast du Recht. Ausschalten ist besser!

Btw TrueNAS Core wurde da nicht die Entwicklung eingestellt und nun alles auf Scale fokussiert?
Gibt's nen fixen Grund wieso du lieber die FreeBSD basierte Variante willst?

Nein, der einzige Grund ist, dass das auf meinem Hauptserver jetzt seit fast 3 Jahren ohne Probleme läuft, aber dann werde ich beim Backup System auf jeden Fall auf Scale gehen, wenn Core nicht mehr weiterentwickelt wird. Danke dir!

 

[Haldi]

ohne in den Keller zu Laufen

IPMI benötigt 1.5-3W dauerhaft dafür kannst du via Remote den PC aufstarten.

Oder ne WiFi Steckdose mit ESP-Home oder was auch immer für Software und du kannst via Handy/Web interface den PC starten wenn du im BIOS auf Powerloss reset "Auto boot" umschaltest.

TrueNAS CORE 13 is the end of the FreeBSD version

https://www.theregister.com/2024/03/18/truenas_abandons_freebsd/ Ist eigentlich naheliegend. Zwei nahezu identische Storage Appliance Varianten mit identischem Open-ZFS und gleichen Diensten wie SAMBA macht keinen Sinn. Free-BSD 14 bleibt als Fallback Option falls man ein BSD OS mit sehr gut...

www.hardwareluxx.de

 

[eehm]

5650G+550B+sparsamess NT+2x ECC RAM 3200+sparsame SSD = ~20W

Die Ryzen Systeme scheinen ja auch noch bezahlbar zu sein.
Sind bzgl. Virtualisierung mit dem 5650G oder ähnlichen mit Einschränkungen im Vergleich zu Threadripper oder Epyc CPUs zu rechnen oder sind die gleichwertig?

Damals als ich meinen alten Server gekauft habe, gab es eigentlich nur Xeon als sinnvolle Lösung und keine "Desktop-CPUs.

 

[pwnbert]

Achtung, die GPU hat den "AMD Reset Bug"... wenn du die GPU durchreichst, und die VM dann crasht, bleibt die GPU dann als "besetzt" gemeldet bis du das händisch per Script oder per Reboot behebst.
8600G / 8700G gibts als "PRO" mit ECC Support, der sollte das nimmer haben (vielleicht was neues... dass es sowas überhaupt gibt merkt man erst, wenn man selbst reinstolpert). Wies mit der Sparsamkeit aussieht, kein Plan. Mit schnellem PCIe wsl. weniger toll, bei DDR5 weiss ichs nicht.

Bin da selbst am herumeiern gerade, siehe Nachbarthread.

5650G mit B550 ist halt echt verhältnismäßig günstig, vom Verbrauch her gut, kann immerhin ECC und einiges...
Ist halt am Ende trotzdem noch ein Kompromiss. Ein Xeon/Eypc mit einer GPU die SR-IOV kann kostet dann halt ein vielfaches und verbraucht ein vielfaches.

Für "normalen" NAS Betrieb ist der 5650G + B550 sicher geeignet, meine ich.

 

[eehm]

Achtung, die GPU hat den "AMD Reset Bug"... wenn du die GPU durchreichst, und die VM dann crasht, bleibt die GPU dann als "besetzt" gemeldet bis du das händisch per Script oder per Reboot behebst.

Danke, dass ist natürlich sehr unschön. Aber vielleicht lösen sie das ja noch per Firmware.

Ein Xeon/Eypc mit einer GPU die SR-IOV kann kostet dann halt ein vielfaches und verbraucht ein vielfaches.

Stimmt, danke für den Hinweis. Das habe ich vergessen. Wenn man eine GPU durchreichen will an eine VM, dann bleibt im bezahlbarem Bereich leider nur iGPU.
Xeon/Epyc haben ja keine internen GPUs integriert.
Oder gibt es inzwischen schon bezahlberes Grafikkarten mit SR-IOV?

 

[pwnbert]

Danke, dass ist natürlich sehr unschön. Aber vielleicht lösen sie das ja noch per Firmware.

Nachdem nur die alten Architekturen betroffen sind, und das schon seit laanger Zeit, eher nicht.
Fürchte ich.

Oder gibt es inzwischen schon bezahlberes Grafikkarten mit SR-IOV?

Ich weiss nich tmal, obs die iGPUs können. Ich werd nicht schlau draus, und kenn mich zu wenig aus.
Die neuen Intel Gens möglicherweise, aber möglicherweise hier auch nur irgend ein Xeon Zeug.
Ich kann dir da nix kompetentes sagen.

 

[brometheus]

Ich hatte mit meinem Am4-Setup einen ziemlich schlechten Idle-Verbrauch mit Core. Waren ca. 20w ohne das irgendwas lief. Habe 20min rumprobiert und es nicht wegbekommen. Mit Scale waren es direkt 12w idle ohne irgendetwas zu ändern. Wenn das Gerät 24/7 läuft würde ich das zumindest im Hinterkopf behalten (muss natürlich nicht für alle Am4-Systeme gelten).

 

[pwnbert]

Das kann schon sein, BSD ist was Treiber angeht ja etwas wählerischer.
Ich halte das für möglich, dass die ein oder andere Energiesparoption da nicht unterstützt wird.

 

[eehm]

Ich hatte mit meinem Am4-Setup einen ziemlich schlechten Idle-Verbrauch mit Core. Waren ca. 20w ohne das irgendwas lief. Habe 20min rumprobiert und es nicht wegbekommen. Mit Scale waren es direkt 12w idle ohne irgendetwas zu ändern. Wenn das Gerät 24/7 läuft würde ich das zumindest im Hinterkopf behalten (muss natürlich nicht für alle Am4-Systeme gelten).

Wow, 12W ist ja der Wahnsinn.
Was hast du da so als HW in Einsatz und welches Netzteil?
Weniger als 12W ist ja schon bald nicht mehr möglich denke ich.

 

[brometheus]

Was hast du da so als HW in Einsatz und welches Netzteil?

4350 G Pro + 16gb ECC + Asrock Gaming 4G + PICO PSU & Meanwell 12v100w. Speicher ist flash only mit 2x 4TB SSD. Für jede 3.5"-Platte muss man ca. 3w im idle addieren, das hat man aber egal bei welchem System. 4x 3.5" würde ich auch nicht an ein Pico PSU hängen. 2x 3.5" + 2x 2.5" ging in der Vergangenheit aber ohne Probleme. Mit einem Sparsamen ATX-NT muss man im idle nochmal 4-8w addieren.

 

[Haldi]

Naja...
Lieber die 4-8W mehr und kein Stress....
Bei 4x 12TB die wohl 2A Anlauf Strom haben dürften da das 160W 200W Peak PicoPSU anfallen.... 42€ ?
Dazu ein 190W Netzteil das was taugt. 15-25€?
Dazu ein Molex -> 4x Sata Strom Adapter 10€

Für 47€ gibt's nen ATX Netzteil. Mit 79% Effizienz.
Mal angenommen du kommst mit dem PicoPSU und Netzteil auf 90% Effizienz....
Dann benötigst du immer noch 4 Jahre bis sich das lohnt... Und das bei 30cent für den Strom... Sofern du ihn günstiger bekommst noch länger.

Energy cost per kWh	$0.30
DC load	20 W
Hours a day	24
PSU cost	$72.00
PSU efficiency	90.00%
PSU #2 cost	$47.00
PSU #2 efficiency	79.00%
Watt difference	2.2
Price difference	$25.00
Energy cost difference per day	$0.01584
Break even period	4 years 3 months 1 days

Sofern du natürlich gehäuse technisch kein Platz für ein ATX Netzteil hast und lieber extern iwo eins unterbringst ist das ganze für nur 30€ Aufpreis eine spitzen Sache.

 

[pumuckel]

Leute vergessen gern das 20% bei 10w nur 2 Watt sind

 

[eehm]

Für 47€ gibt's nen ATX Netzteil. Mit 79% Effizienz.
Mal angenommen du kommst mit dem PicoPSU und Netzteil auf 90% Effizienz....
Dann benötigst du immer noch 4 Jahre bis sich das lohnt... Und das bei 30cent für den Strom... Sofern du ihn günstiger bekommst noch länger.

Also wäre deine Empfehlung ein Netzteil mit möglichst wenig Leistung (natürlich ausreichende, dass der Wirkungsgrad möglichst gut ist und dann je nach Strompreis und Geldbeutel Bronze, Silber, Gold oder Platin für die Effizienz?

 

[Haldi]

Meine Empfehlung ist: geh in der Excel Liste bei der 20W Spalte die Effizienz absteigen soweit runter bis du eines findest das für dich günstig genug ist!

Wenn ein 750W Netzteil bei den 20W gut genug läuft wieso nicht? Sofern das aber 250€ kostet bist du mit einem das 10% schlechter umwandelt aber nur 50€ kostet trotzdem günstiger unterwegs für die nächsten paar Jahre.

PSU Low Idle Efficiency Database by Wolfgang's Channel

docs.google.com

 

[eehm]

4350 G Pro + 16gb ECC + Asrock Gaming 4G + PICO PSU & Meanwell 12v100w

Auch wenn es als Low Performance geplant war, hätte ich noch eine Frage.
Kann deine Kombination insbesondere der 4350G Pro seine iGPU an eine bzw. mehrere VMs durchreichen?

 

[pwnbert]

Jein.

An eine bedingt, siehe Reset-Bug, siehe Proxmox-Fix und so...
An mehrere offenbar nicht,. sowas wie SR-IOV gibts da wohl nicht, QLX ist eher meh, virtgl hab ich noch nicht testen können.
Intel ist da mit gvt-g recht interessant, müsste man sich aber auch einlesen, spielen und testen, die ganzen SR-IOV like Features sind eher... ne Enterprise Niesche. Dafür halt kein ECC ohne 500€ Board und schlechtes Bifurication.

Beitrag automatisch zusammengeführt: 17.08.2024

PSU Low Idle Efficiency Database by Wolfgang's Channel

docs.google.com

Spannend, dass diese billigen Coolermaster ganz gut sind. Dieses MWE 450 ist ja durchaus kaufbar. 78% bei 20W heißt im Klartext 4,4W Verlust, das ist schon gut. Eins mit 82% hätte dann 3,6W Verlust, also 0,8W weniger...

Um ca. 50€ kann man dieses MWE 450 imho kaufen...
Kein Grund damit Pico + Netzteil (Meanwell oder so) rumzumurksen, der ganze Kabelsalat wird weder sparsamer, noch kompakter noch zuverlässiger noch billiger.