A Nvidia lançou uma tecnologia inovadora RTX voltada para aprimorar assistentes de IA e humanos digitais nos novos laptops GeForce RTX AI. Um dos destaques deste lançamento é o Projeto G-Assist, uma demonstração técnica de assistente de IA com suporte RTX que oferece assistência contextual em jogos de PC e aplicativos. Essa demonstração foi apresentada juntamente com ARK: Survival Ascended, da Studio Wildcard.
Durante a keynote do CEO Jensen Huang na Computex em Taiwan, a Nvidia também introduziu o primeiro Nvidia NIM (Nvidia Inference Microservices) para a plataforma de humanos digitais Nvidia ACE. Esses avanços resultam do Nvidia RTX AI Toolkit, um conjunto de ferramentas e SDKs destinado a ajudar desenvolvedores a otimizar e implantar grandes modelos de IA generativa em PCs com Windows, complementando as robustas inovações de IA RTX da Nvidia, que aceleram mais de 500 aplicativos de PC, jogos e 200 designs de laptops OEM. A visão da Nvidia inclui a adoção generalizada de IA em data centers, computação de ponta e sistemas domésticos.
Os novos laptops RTX AI da ASUS e MSI apresentam GPUs GeForce RTX 4070 e sistemas em chip energeticamente eficientes com capacidades de IA no Windows 11. "A Nvidia iniciou a era do PC com IA em 2018 com o lançamento das GPUs RTX Tensor Core e da tecnologia DLSS", afirmou Jason Paul, Vice-Presidente de IA de Consumidor da Nvidia. "Com o Projeto G-Assist e o Nvidia ACE, estamos desbloqueando a próxima geração de experiências impulsionadas por IA para mais de 100 milhões de usuários de PCs RTX AI."
Projeto G-Assist: Um Assistente de IA Revolucionário
Os assistentes de IA estão prontos para transformar a experiência de jogos e aplicativos, oferecendo estratégias, analisando replays multiplayer e auxiliando em fluxos de trabalho complexos. O Projeto G-Assist exemplifica esse futuro. Os jogos para PC apresentam mundos expansivos e mecânicas complexas, frequentemente desafiando até os gamers mais dedicados. O Projeto G-Assist utiliza IA generativa para fornecer conhecimento sobre o jogo diretamente aos jogadores. Por meio de entradas de voz ou texto e dados contextuais da tela do jogo, ele aproveita modelos de visão computacional para aumentar a percepção situacional, resultando em respostas personalizadas em forma de texto ou fala.
Colaborando com a Studio Wildcard, o Projeto G-Assist demonstrou sua eficácia em ARK: Survival Ascended, respondendo a perguntas dos jogadores sobre criaturas, itens, lore e muito mais, personalizando sua orientação de acordo com a sessão de jogo do usuário. Além disso, otimiza os sistemas de jogo para desempenho máximo, oferecendo insights sobre métricas, configurações gráficas, opções de overclocking e gerenciamento do consumo de energia.
Nvidia ACE e Microserviços de Inferência
A tecnologia ACE da Nvidia agora traz capacidades de humano digital para PCs RTX por meio do Nvidia NIM. Essa inovação simplifica a implantação, reduzindo de semanas para minutos. Os NIMs ACE permitem inferência de alta qualidade localmente nos dispositivos, facilitando a compreensão de linguagem natural, síntese de fala e animação facial. Na Computex, a Nvidia apresentou a estreia do ACE NIM na demonstração técnica Covert Protocol, desenvolvida com a Inworld AI, apresentando as capacidades de reconhecimento automático de fala NVIDIA Riva e NVIDIA Audio2Face™.
Colaboração com a Microsoft para IA Acelerada por GPU
A Nvidia e a Microsoft estão se unindo para aprimorar a IA generativa em aplicativos do Windows, oferecendo aos desenvolvedores acesso a APIs para modelos de linguagem pequenos (SLMs) acelerados por GPU. Esses modelos possibilitam aplicações como resumo de conteúdo, geração e automação de tarefas, complementadas por capacidades de geração aumentada por recuperação (RAG) adaptadas a domínios específicos. Impulsionadas pelas GPUs RTX da Nvidia e outros aceleradores de hardware, essas inovações em IA prometem experiências rápidas e responsivas em todo o ecossistema Windows, com um preview para desenvolvedores programado para ser lançado ainda este ano.
Apresentando o RTX AI Toolkit
Para enfrentar o uso generalizado de modelos de código aberto projetados principalmente para data centers, a Nvidia está lançando o RTX AI Toolkit, um conjunto de ferramentas e SDKs para criar modelos de IA específicos de aplicativos em PCs RTX. Previsto para acesso mais amplo aos desenvolvedores em junho, o toolkit permite personalização utilizando ferramentas QLoRa de código aberto e otimização com Nvidia TensorRT, alcançando aumentos de desempenho de até 4x em comparação com modelos pré-treinados. O SDK Nvidia AI Inference Manager (AIM) simplifica a integração de IA entre PCs e serviços de nuvem, pré-configurando modelos necessários e apoiando várias backends de inferência em diferentes processadores.
Parceiros de software como Adobe, Blackmagic Design e Topaz estão incorporando componentes do RTX AI Toolkit em suas aplicações criativas, melhorando significativamente o desempenho de IA em PCs RTX.
IA na Criação de Conteúdo e Modding
A Nvidia também está integrando aceleração de IA RTX em ferramentas para criadores, modders e entusiastas de vídeo. Após a introdução da aceleração RTX na interface Automatic1111 Stable Diffusion no ano passado, a popular ComfyUI em breve receberá melhorias, oferecendo um aumento de desempenho de até 60% em relação à versão atual. O Nvidia RTX Remix, uma plataforma de modding para remasterização de jogos clássicos DirectX 8 e 9 com ray tracing, NVIDIA DLSS 3.5 e materiais fisicamente precisos, também está se expandindo. O RTX Remix Toolkit, lançado como código aberto no início deste ano, já engajou mais de 20.000 modders, resultando em mais de 130 projetos remasterizados.
Novas melhorias estão por vir, conforme o RTX Remix Toolkit se torna completamente open source, permitindo ainda mais flexibilidade para modders substituírem ativos de jogos e otimizarem cenas. Além disso, a Nvidia fornecerá uma API REST para integração com ferramentas de criação de conteúdo digital e um SDK especializado para implantar o renderizador RTX Remix em várias aplicações. Por fim, o Nvidia RTX Video, um recurso de super-resolução impulsionado por IA em grandes navegadores web, agora está disponível como SDK para desenvolvedores. Essa inovação em breve permitirá que o DaVinci Resolve da Blackmagic Design e o Filmora da Wondershare aprimorem a qualidade de vídeo para 4K e convertam arquivos de faixa dinâmica padrão em HDR. O VLC, o player de mídia gratuito, também incorporará o RTX Video HDR, melhorando suas capacidades de super-resolução existentes.