ZFS-Fileserver + Virtualisierte OS für TV-server (Linux) & foobar-upnp-server (Win)

[klexxy]

ZFS-Fileserver + Virtualisierte OS für TV-server (Linux) & foobar-upnp-server (Win)

Ich plane die heimische Medienwiedergabe zu zentralisieren.
Darunter fällt LiveTV, Videostreaming der archivierten Blu-ray-Sammlung, Audiostreaming der als flac archivierten CD-Sammlung sowie Bereitstellung von Fotos.
All dies soll an 5 Clients (2*MacOS, 1*Windows, 2*iOS/AppleTV, alle Gbit-LAN) über XBMC verfügbar sein (reiner Stream, keine Transcodierung).

Um die Medienwiedergabe bereitzustellen, wären 3 "Server" notwendig:
- Fileserver/NAS als Datengrab für Video-/Audio-/Fotodateien (OS mit ZFS-Support)
- TV-Server mit 2*DVB-S2-Dual-Tunern (Linux mit Tvheadend-Support)
- Audio-Server mit foobar2000 über upnp (aus Tagging-, Verwaltungs-, Plugin-, Statistikgründen) (Windows)

Statt diese 3 Systeme getrennt voneinander auf jeweils eigener Hardware zu betreiben, wäre es meiner Meinung nach effizienter die Systeme auf einer Hardwareeinheit laufen zu lassen, da der TV-Server Aufnahmen auf dem Fileserver speichern soll und der Audio-Server die Musik vom Fileserver holt, häufig also 2 Server gleichzeitig laufen und Strom ziehen.
Dies müsste mit Hilfe von Virtualisierung möglich sein.
In diesem Bereich kenne ich mich allerdings überhaupt nicht aus, kann also auch nicht einschätzen, ob so etwas stabil zum laufen gebracht werden kann.

Es geht also um einen Server mit den folgenden Eckdaten:
- Linux, Windows, OpenIndian/Openmediavault/Free-BSD auf einem Server
- 4*3TB HDDs + Reserven für nachträglicher Aufstockung
- Software-RAID (simple Vergrößerung des RAIDs möglich, Daten noch nutzbar bei einer defekten Platte)
- 1* PCIe x1/ mini PCIe Steckplatz für die TV-Karten
- WOL (einschalten sobald ein Client bootet, ausschalten wenn kein zugriff mehr von den Clients kommt. Möglich bei Virtualisierung?)
- SSD als Systemplatte für schnelles booten der 3 Systeme (alle 3 auf einer SSD möglich oder für jedes OS eine notwendig?)
- Remote Wartung und Steuerung
- Worst-Case: 2*1080p Streams, 1* flac-Stream, 1*HDTV-Stream+ HD-Aufnahme gleichzeitig
- stromsparend und relativ leise

Ist mein Vorhaben sinnvoll? lässt sich das so reibungslos realisieren oder sollte ich die 3-Server-Variante umsetzen?

 

[stifu1]

Habe zwar nicht allzuviel Erfahrung, aber die beiden ersten habe ich realisiert. VmWare ESXI/vSphere, eine VM mit napp-it als Server/Datengrab, und eine VM mit YAVDR als TV-Maschiene. Da ich leider noch kein Digtal Tv-Empfang habe, werden 2 Analoge USB TV Box direkt an den YAVDR durchgereicht.
3x500GB für Daten und 3x2TB mit ZFS für Multimedia direkt an napp-it durchgereicht und als pools eingerichtet. Soviel ich weiss kannst du YAVDR auch als streaming Server benutzen.

 

[mpirklbauer]

Also so weit ich weiß und mir auch von anderen Usern gesagt wurde, ist es nicht möglich PCI/PCI-e TV- Karten durch zu reichen.
Hatte das selbe vor, nur habe ich es mangels Testhardware wieder gelassen.

Bei mir war das Problem, dass ich den TV-Server im Zentyal integrieren wollte, da mein Server darauf läuft.

Du könntest mal Ubuntu Server versuchen, da müsste sich alles vereinen lassen.
Vor allem unterstützt es viele TV-Karten von Haus aus.

 

[gea]

Es geht also um einen Server mit den folgenden Eckdaten:
- Linux, Windows, OpenIndian/Openmediavault/Free-BSD auf einem Server
- 4*3TB HDDs + Reserven für nachträglicher Aufstockung
- Software-RAID (simple Vergrößerung des RAIDs möglich, Daten noch nutzbar bei einer defekten Platte)
- 1* PCIe x1/ mini PCIe Steckplatz für die TV-Karten
- WOL (einschalten sobald ein Client bootet, ausschalten wenn kein zugriff mehr von den Clients kommt. Möglich bei Virtualisierung?)
- SSD als Systemplatte für schnelles booten der 3 Systeme (alle 3 auf einer SSD möglich oder für jedes OS eine notwendig?)
- Remote Wartung und Steuerung
- Worst-Case: 2*1080p Streams, 1* flac-Stream, 1*HDTV-Stream+ HD-Aufnahme gleichzeitig
- stromsparend und relativ leise

Ist mein Vorhaben sinnvoll? lässt sich das so reibungslos realisieren oder sollte ich die 3-Server-Variante umsetzen?

Sollte mit ESXi möglich sein, sofern der Server vt-d unterstützt.
siehe http://www.hardwareluxx.de/communit...-vt-d-zfs-und-niedrigem-verbrauch-897283.html

Auf der Bootplatte muss neben ESXi mindestens die Storage VM liegen. Andere können hier abgelegt werden.
Sicherer sind sie aber auf dem ZFS Storage (per NFS an ESXi anbinden)

Pass-through geht mit
- vielen pci-e Storage und Netzwerkkarten sehr gut.
- bei PCI würde ich es nicht erwarten.
- PCI-e Sat Karten sollten gehen
- USB Sat Adapter gehen auf jeden Fall
- Grafikkarten nur ganz ausgewählte

Stromverbrauch
Mit Xeon-L (ab 17W Dual bzw 45W Quadro) sind schnelle low-Power Systeme machbar
Ein Dual Core sollte reichen falls kein Echtzeit-Umkodieren oder Verschlüsseln gebraucht wird.

WOL
wird wohl nicht gehen

Remote Wartung
auf IPMI achten (Remote Keyboard/Video),
Gute und günstige Lösung z.B. uATX Boards (Sandy Bridge) von SuperMicro mit der X9...-F Serie

 

[Boy2006]

Sorry aber "Fernsehen" auf eine VM Durchschleifen ist einfach nur krank.
Wenn würde ich das nur auf einer Lokalen Maschiene machen.
Wenn du doch ein Win verwenden willst schaue dir mal von Hauppauge "WinTV Extend" an.

 

[josen]

Hallo,

wieso bist du auf ZFS angewiesen? Wenn du deinen Server mit Linux betreibst, kannst du schonmal den Overhead für ein Solaris/FreeBSD sparen und KVM für die Virtualisierung von Windows einsetzen.

Grüße

 

[gea]

vielleicht deshalb
www.solarisday.de/downloads/storageserver0609nau.pdf

 

[Limit64]

ZFS ist schon ein tolles Dateisystem, aber vor allem im privaten Umfeld bin ich mir nicht sicher, ob es so einen großen Mehrwert hat, dass es sich lohnt deshalb ein extra Betriebssystem laufen zu lassen. Ich bin da eher ein Verfechter des KISS-Prinzips. Ich würde daher auf die VMs verzichten und versuchen nur mit Linux auszukommen, d.h. für den Fileserver muss dann mdadm/lvm/ext4 oder btrfs reichen. Ich habe keine Erfahrung mit foobar, aber ich könnte mir sehr gut vorstellen, dass es mit wine funktioniert. Evtl. findest du auch einen kompatiblen nativen Linux Server dafür.

Solltest du trotzdem die Variante mit den VMs machen wollen, würde ich auf jeden Fall Linux als das Haupt-Betriebssystem benutzen, dann sparst du dir die Problematik mit dem durchreichen von PCIe Geräten an Gäste, was zwar theoretisch funktioniert (funktionieren könnte), aber in der Realität immer noch viele Probleme bereitet. Einen Fileserver oder foobar macht hingegen in der VM deutlich weniger Probleme.

 

[sermon]

wie limit64 sagt, vielleicht ein nicht virtualisiertes linux-system zum tv-und audio-streaming, und darauf ein virtualisiertes solaris zb mit smb-freigaben?

 

[gea]

Ein ZFS Storage OS (z.B. Solaris, OI) läßt sich ohne nennenswerte Performanceeinbußen virtualisieren,
nicht jedoch das Storage selber (Speicher, Platten).

Es muss also entweder das Storage OS selber als Basissoftware installiert werden um darauf
zu virtualisieren (OI+KVM oder Linux mit KVM und ZFS) oder es muss die Möglichkeit bestehen, die Storagehardware dem Storage-OS direkt zur Verfügung zu stellen - so wie bei ESXi mit pass-through der Hardware.

Vorteil von ESXi (neben der Verbreitung): alle VM's (OI, Linux, Win etc) laufen gleichberechtigt.
Hardware läßt sich direkt an eine VM durchreichen.