Tenstorrent Dev Day: Blackhole mit neuen RISC-V-Kernen können bestellt werden

Wenn Du diese Anzeige nicht sehen willst, registriere Dich und/oder logge Dich ein.
Wurden diese Karten irgendwo mal mit ML Modelle wie Ollama getestet?
 
Wurden diese Karten irgendwo mal mit ML Modelle wie Ollama getestet?
Upsteam Ollama / llama.cpp haben (noch) keinen direkten Support für die Tenstorrent Beschleuniger (siehe hier für WIP).

Im README der nativen TT-NN Bibliothek finden sich Benchmark-Ergebnisse der Wormhole Vorgängergeneration für einige LLMs, die auch von Ollama unterstützt werden.
 
Hardwareluxx setzt keine externen Werbe- und Tracking-Cookies ein. Auf unserer Webseite finden Sie nur noch Cookies nach berechtigtem Interesse (Art. 6 Abs. 1 Satz 1 lit. f DSGVO) oder eigene funktionelle Cookies. Durch die Nutzung unserer Webseite erklären Sie sich damit einverstanden, dass wir diese Cookies setzen. Mehr Informationen und Möglichkeiten zur Einstellung unserer Cookies finden Sie in unserer Datenschutzerklärung.


Zurück
Oben Unten refresh