Nvidia présente la dernière mise à jour technologique du système de chat IA ChatRTX.

Une nouvelle mise à jour de Nvidia ChatRTX, la plateforme de calcul visuel conçue pour un rendu de qualité cinématographique en temps réel pour les développeurs de jeux, est désormais disponible en téléchargement. Cette mise à jour améliore les capacités de la démo technique et élargit la gamme des modèles de langage de grande taille (LLMs) pris en charge pour les applications d'IA sur RTX.

Présentée pour la première fois lors de la GTC 2024 en mars dernier, cette mise à jour apporte plusieurs nouvelles fonctionnalités. ChatRTX prend désormais en charge une plus large gamme de LLMs, y compris Gemma, le dernier modèle de Google, et ChatGLM3, un modèle bilingue open source supportant l'anglais et le chinois, offrant ainsi aux utilisateurs une flexibilité accrue.

Le nouveau support pour les photos permet aux utilisateurs de ChatRTX de rechercher et d'interagir facilement avec leurs données photographiques localement, sans avoir à gérer des étiquettes de métadonnées complexes. Cela est rendu possible grâce à la pré-formation contrastive langage-image (CLIP) d'OpenAI.

De plus, les utilisateurs peuvent désormais interagir verbalement avec leurs données, grâce à l'intégration de Whisper, un système de reconnaissance vocale automatisée qui optimise la compréhension du langage parlé par ChatRTX.

ChatRTX permet aux utilisateurs d'exploiter pleinement les capacités de l'IA sur leurs PC équipés de RTX, en utilisant la performance accélérée du logiciel TensorRT-LLM et de NVIDIA RTX, tout en garantissant la sécurité des données par un traitement local. De plus, il est disponible en tant que projet de référence gratuit sur GitHub, permettant aux développeurs d'explorer et d'élargir les applications d'IA utilisant la technologie RAG pour divers cas d'utilisation.

Pour plus de détails, visitez le blog AI Decoded sous embargo, qui présente une nouvelle mise à jour pour la bêta de RTX Remix, maintenant intégrant DLSS 3.5 avec Ray Reconstruction.