tcg
Punkte für Reaktionen
44

Letzte Aktivität Beiträge Informationen

    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Ich muss mir langsam mal HA anschauen !
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Hab ich mit auch schon überlegt, ne eigene Alexa... Eigentlich ganz einfach ;-) Ein Mikrofon zum streamen (udp ?) an Whisper.cpp...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Was genau hast du vor ?!
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Ja klar, die M10 wären jetzt erstmal zum testen wie sich das verhält, dazu hab ich ja auch fast alles hier jetzt. Juhu Weihnachtsurlaub...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Ich habe gerade gewaltige Probleme mit 24GB VRAM, nichtmal llama3.1:8b läuft noch vernünftig mit großem Context... Je mehr ich gerade...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Hupsa, mea culpa, Ich blöd nicht AI blöd. Das war mein alter Thread ! Dieser wäre dann: Ich werde die wichtigsten Punkte aus dem...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Wie oben geschrieben, ich hätte gerne: llama3.3:70b-instruct-q6_K mit 64k context -> 89 GB. Das passt in 6*16 rein. Inclusive einem...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Dafür hab ich ja die 4090 im Desktop ;-) Ich weiss nicht wie Stable Diffusion skaliert, kann ich ja mal dann mal testen. ("dann" ist...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Werden wir bald wissen... Ich teste das dann mal... Jetzt hoffe ich dass die RTX 5000 bald rauskommen, dann werden die 4060 hoffentlich...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Ich denke nicht... Soweit ich es verstanden habe bekommt jede GPU ihr eigenes Päckchen (die unterschiedlich sind). Sonst könnte man ja...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Board hab ich ja schon ;-) Und 2 M10 liegen hier noch rum... Eine M10 ist ja schon "4 in 1". Das sind dann fürs System 8 GPUs, aber halt...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      danke, ich schau mal... den kenn ich, aber nicht dieses video. edit: Netzteil sollte reichen, 1800W (80 Plus Platinum), ist ein...
    • tcg
      tcg antwortete auf das Thema Neuer AI-Server.
      Mit KI sollte das gehen, ich hatte mal einen Versuch mit 2 Tesla M10 (super alt), die tauchen als 4 GPUs im System auf. z.b. ollama...
    • tcg
      Hi, ich würde gerne von euch meinen aktuellen Plan genehmigt bekommen... Seit einiger Zeit spiele ich etwas mit KI (ollama+nodejs)...
      • 1733743201754.png
    • tcg
      tcg antwortete auf das Thema QNAP QuTS extrem langsam.
      Mein QNAP ist echt nicht so schnell... Eine 36GB Datei (mein ATM9.zip ;-) fängt mit 300MB/s an und steigert sich langsam, könnte aber...
      • 1733255076236.png
  • Laden...
  • Laden...
Hardwareluxx setzt keine externen Werbe- und Tracking-Cookies ein. Auf unserer Webseite finden Sie nur noch Cookies nach berechtigtem Interesse (Art. 6 Abs. 1 Satz 1 lit. f DSGVO) oder eigene funktionelle Cookies. Durch die Nutzung unserer Webseite erklären Sie sich damit einverstanden, dass wir diese Cookies setzen. Mehr Informationen und Möglichkeiten zur Einstellung unserer Cookies finden Sie in unserer Datenschutzerklärung.


Zurück
Oben Unten refresh