[Kaufberatung] Proxmox HW-Build mit Raptor Lake oder AMD?

[host8664]

Hallo zusammen,

ich möchte mir privat für mein Homelab neben einem bereits vorhandenem TrueNAS Scale Server (Storage) ein Proxmox Server für mehrere VMs konfigurieren, welcher genug RAM bieten soll und eine Platform ausgesucht, die im Stromverbrauch hoffentlich nichtzuviel verbraucht. Als Workload möchte ich neben Entwicklungsprojekten (GitLab, Datenbanken), Reporting, Collaboration (Nextcloud), Streaming (Jellyfin), evtl. auch mit AI Modell rumspielen (https://github.com/ollama/ollama).

Als Hardware habe ich aufgrund der Stromverbrauch Thematik eher zu Intel tendiert, da bei den Ryzens der Idle Verbrauch anscheinbar höher ist, jedoch bietet die AMD Platform eine bessere Bitfurcation Unterstützung.
Ich hab bewusst kein W680 Chipsatz mit ECC Support genommen, da die Preise der Board (> 400€) für mich zu teuer sind, hab ein Kompromiss genommen, schaut euch bitte die nachfolgende Zusammenstellung an:

***********************************************************************************************************************
PC-Gehäuse: 1x Inter-Tech IPC 4U-4098-S, 4HE (https://geizhals.de/inter-tech-ipc-4u-4098-s-88887177-a1271457.html)
Netzteil: 1x be quiet! Pure Power 11 400W ATX 2.4 (BN292) (https://geizhals.de/be-quiet-pure-power-11-400w-atx-2-4-bn292-a1910200.html)
Mainboard: 1x GIGABYTE Q670M D3H (Intel Sockel 1700 ) (https://geizhals.de/gigabyte-q670m-d3h-a3059379.html)
Prozessor (CPUs): 1x Intel Core i5-14600, 6C+8c/20T, 2.70-5.20GHz, tray (https://geizhals.de/intel-core-i5-14600-cm8071504821018-a3096398.html)
CPU-Kühler: 1x Alpenföhn Brocken 4 (https://geizhals.de/alpenfoehn-brocken-4-84000000205-a2907654.html)
Arbeitsspeicher (RAM): 4x Kingston ValueRAM DIMM 32GB, DDR5-5600, CL46-45-45, on-die ECC (https://geizhals.de/kingston-valueram-dimm-32gb-kvr56u46bd8-32-a2890892.html)
Datenträger SSD: 2x Kingston SSDNow KC600 256GB, SATA (SKC600/256G) (https://geizhals.de/kingston-ssdnow-kc600-256gb-skc600-256g-a2161781.html)
Datenträger NVMe: 2x Kingston KC3000 PCIe 4.0 NVMe SSD 2TB, M.2 (SKC3000D/2048G) (https://geizhals.de/kingston-kc3000-pcie-4-0-nvme-ssd-2tb-skc3000s-2048g-a2621457.html)
***********************************************************************************************************************

- SSDs --> BootOS als RaidZ1
- NVMe´s --> Schnell für VMs als RaidZ1

Fragen:
- Kann ich auf dem Board eine PCIe Karte (ASUS Hyper M.2) für weitere NVMe einbauen, Stichwort Bitfurcation, oder muss ich mit den beiden M.2 Slots auskommen?
- Die beiden Intel Netzwerkslots kann ich nutzen, um flexibel bestimmte VMs mit bestimmten Ethernet Schnittstellen zu bedienen, auch VLANs Trennung?

 

[Ashampoo]

Zur zweiten Frage..

Ja klar, du musst nur ne virtuelle bridge auf die NIC legen und der vm zuweisen.

Durchreichen (PASSTHROUGH) braucht IOMMU support.

Beitrag automatisch zusammengeführt: 29.01.2024

ZFS frisst ssd. Für das OS ist es ok. Dem vm zpool spendieren noch ne dritte ssd fürs raidZ

 

[Tremendous]

Sicher dass der Brocken in das Gehäuse passt? Ich meine die Bauhöhe gibt das nicht her.

 

[Trambahner]

# Raidz1 benötigt 3 Disks/SSDs. Was hier gemeint ist, dürfte wohl ein Mirror sein.

# Intel 1200+1700 erlauben generell keine Aufteilung des sobst für die GPU genutzten x16 Slots auf x8x4x4 oder x4x4x4x4 Lanes per PCIE-Bifurcation, es gibt nur x16 oder x8x8. Das können die CPUs einfach nicht, ist bei Intel so.
Und: die Aufteilung x8x8 muss vom Board und Bios auch implementiert sein. Ob das o.g. Board das kann: keine Ahnung, ist im Manual nicht spezifiziert. Musst Du den Herstellersupport fragen.
=> Eine Hyper M2 Karte funktioniert also, wenn sie geht, maximal für 2 SSDs.
Weitergehende SSDs kannst Du nur mit einem teuren Controller mit PLX-Chipsatz nutzen.

Willst Du 4 SSDs im 16er Slot betreiben, musst Du zu definitiv AMD (und nort zu nicht-APUs) greifen. Wo es übrigens, gemessen ander Leistungsfähigkeit, durchaus einigermaßen sparsame Konfigurationen gibt. Ferner ist AM4 derzeit sehr preiswert zu haben, B550 sind aber halt wiederum recht limitiert, was an Geräten an den Chipsatz angeschlossen werden kann. AM5 mit X670 wird dann teuer und deutlich stromhungriger als eine kleine AM4-Lösung mit B550.

Unterm Strich: sowohl Intel als auch AMD (inkl. ihrer Varianten) haben ihre Vor und Nachteile; die ideale Kombination gibt es nicht.

Consumer 120er Towerkühler bekommst Du allermeist in kein 4U 19"-Case. Da ist der NH-D9L bei Towern quasi das Maximum.

 

[host8664]

Guten Abend,
vielen Dank für die Rückmeldungen, war zeitlich eingeschränkt, wollte mich nochmal syncen, hab mal folgendes AM4 Build zusammengestellt:

Vorab, die Eckpunkte vom Hypervisor sind 128GB RAM, sowie eine CPU mit > 10 Cores (Puffer):

***********************************************************************************************************************
PC-Gehäuse: 1x Inter-Tech IPC 4U-4098-S, 4HE (https://geizhals.de/inter-tech-ipc-4u-4098-s-88887177-a1271457.html)
Netzteil: 1x be quiet! Pure Power 11 400W ATX 2.4 (BN292) (https://geizhals.de/be-quiet-pure-power-11-400w-atx-2-4-bn292-a1910200.html)
Mainboard: 1x ASRock Rack B550D4M (2x GbLAN, 6xSATA) (https://geizhals.de/asrock-rack-b550d4m-a2744374.html) -> https://www.asrockrack.com/general/productdetail.asp?Model=B550D4M#Specifications
Favorit Prozessor: 1x AMD Ryzen 9 5900X, 12C/24T (https://geizhals.de/amd-ryzen-9-5900x-100-100000061wof-a2392526.html)
Kompromiss Prozessor: 1x AMD Ryzen 7 5700X, 8C/16T (https://geizhals.de/amd-ryzen-7-5700x-100-100000926wof-a2709092.html)
CPU-Kühler: 1x ???
Arbeitsspeicher (RAM): 4x Kingston Server Premier DIMM 32GB, DDR4-3200 (https://geizhals.de/kingston-server-premier-dimm-32gb-ksm32ed8-32hc-a2679022.html)
Datenträger SSD: 2x Kingston SSDNow KC600 256GB, SATA (SKC600/256G) (https://geizhals.de/kingston-ssdnow-kc600-256gb-skc600-256g-a2161781.html)
Datenträger NVMe: 2x Kingston KC3000 PCIe 4.0 NVMe SSD 2TB, M.2 (SKC3000D/2048G) (https://geizhals.de/kingston-kc3000-pcie-4-0-nvme-ssd-2tb-skc3000s-2048g-a2621457.html)
PCI Adapter Karte: 1x ASUS Hyper M.2 X16 Gen 4 Card (https://geizhals.de/asus-hyper-m-2-x16-gen-4-card-90mc08a0-m0eay0-a2267859.html)
***********************************************************************************************************************

- Bei der CPU habe ich noch ein Konflikt bzgl. Stromverbrauch, der 5900X schluckt in diversen Tests und Erfahrungsberichte im Idle "viel", glaub da wäre der kleinere Bruder 5700X als Kompromiss besser geeignet, oder was meint ihr, kann man den großen Bruder per Settings bzgl. Stromverbrauch runter optimieren?
- Welchen CPU Lüfter müsste ich nehmen?
- Die ASUS Hyper Card, wäre die mit dem Mainboard -> Bitfurcation kompatibel?
- Ich muss die Hyper Card nicht sofort mit 4 SSDs voll bestücken, zuerst erstmal 2 SSDs, ich frage mich nur wenn ein Datenpool schon aufgebaut ist, dann kann ich die weiteren 2 SSDs nicht mehr im Pool aufnehmen -> ZFS
- Die beiden SATA SSDs würde ich als Mirror für das Proxmox OS zur Verfügung stellen

Preislich komme ich mit dem Build oben und der 5700X CPU auf ~1200€ und mit der 5900X CPU wären es ~1350€

 

[host8664]

Hallo zusammen, habt ihr noch Input/Impulse/Feedback für mich?

 

[b99]

denke mal mit daran, das AMD mit Vollbestückung den Ram nur mit 2666 MHz betreiben kann. Hab das Problem auch erst nach dem Einbau erfahren: https://valid.x86.fr/rzxcwp

 

[Trambahner]

Das kann man pauschal so nicht sagen, kommt auf die Chipgüte an. Als die B2 Steppings rauskamen, sagte man denen teilw. auch bessere Ramcontroller nach.

Mein 5950X (B2 Stepping) und 5600X (Erstversion, quasi bei Erscheinen sofort gekauft. B0-Stepping) haben mit 4x32GB @ 3200CL22 mt/s ECC-Ram (=Standardtimings der 3200er ECC Module) keinerlei problem.
Micron E-Die @ Stock

Dito mein 4750G und 5750G mit 4x16GB Dualrank 3200CL18 ECC.
16er Dualrank Samsung B-Die 2666er, auf 1,37V und 3200 CL18 gestellt.