Ein neues Update für Nvidia ChatRTX, die visuelle Computing-Plattform für Echtzeit-Rendering in Kinoqualität für Spieleentwickler, steht jetzt zum Download bereit. Dieses Update verbessert die Fähigkeiten der Tech-Demonstration und erweitert die unterstützten großen Sprachmodelle (LLMs) für RTX-fähige KI-Anwendungen.
Das Update, das erstmals im März 2024 auf der GTC vorgestellt wurde, bringt mehrere neue Funktionen. ChatRTX unterstützt nun ein breiteres Spektrum an LLMs, einschließlich Gemma, dem neuesten Modell von Google, und ChatGLM3, einem offenen, zweisprachigen LLM, das sowohl Englisch als auch Chinesisch unterstützt und den Nutzern mehr Flexibilität bietet.
Die neue Fotounterstützung ermöglicht es ChatRTX-Nutzern, mühelos auf ihre Fotodaten lokal zuzugreifen und diese zu durchsuchen, ohne komplexe Metadaten beschriften zu müssen. Dies wird durch OpenAIs kontrastives Sprach-Bild-Vortraining (CLIP) ermöglicht.
Darüber hinaus können Nutzer nun verbal mit ihren Daten interagieren, dank der Integration von Whisper, einem automatisierten Spracherkennungssystem, das ChatRTXs Fähigkeit verbessert, gesprochene Sprache zu verstehen.
ChatRTX ermöglicht es Nutzern, die vollen Möglichkeiten der KI auf ihren RTX-fähigen PCs auszuschöpfen, indem die beschleunigte Leistung von TensorRT-LLM-Software und NVIDIA RTX genutzt wird – und das alles unter Gewährleistung der Datensicherheit durch lokale Verarbeitung. Zudem ist es als kostenloses Referenzprojekt auf GitHub verfügbar, was Entwicklern die Erkundung und Erweiterung von KI-Anwendungen mithilfe von RAG-Technologie für unterschiedlichste Anwendungsfälle ermöglicht.
Für weitere Details besuchen Sie den embargoed AI Decoded Blog, der ein neues Update für die RTX Remix Beta umfasst, jetzt mit DLSS 3.5 und Ray Reconstruction.