O CEO da Nvidia, Jensen Huang, elevou a interatividade no mundo dos games a outro patamar no evento Computex 2023, realizado nesta semana em Taipei, em Taiwan. Na ocasião, ele demonstrou como um jogador pode conversar com um personagem de videogame.
Com a tecnologia, o jogador pode pressionar um botão e se comunicar usando a própria voz. A Nvidia considera a ferramenta “uma espiada no futuro dos jogos”. Apesar disso, os diálogos ainda são bastante básicos, de acordo com o The Verge.
Em um pré-briefing do evento, o vice-presidente da plataforma GeForce da Nvidia, Jason Paul, declarou que a tecnologia pode expandir para mais de um personagem não jogável por vez, podendo até deixá-los conversarem entre si. A opção, entretanto, ainda não passou por testes.
Como funciona o bate-papo com personagens da Nvidia?
Um vídeo criado pela Nvidia, e pela parceira Convai, mostra como a IA (Inteligência Artificial) generativa reage à fala. A ideia é promover as ferramentas do bate-papo, principalmente o conjunto do middleware “Nvidia ACE” (Avatar Cloud Engine) para jogos. É possível executá-lo localmente e na nuvem.
O ACE inclui as ferramentas de implantação de modelos de linguagem grandes NeMo da companhia, além de usar Riva para a conversão entre texto e fala, entre outros. A demonstração foi construída no “Unreal Engine 5” com renderização de ray tracing.
Ainda não se sabe se algum videogame irá adotar todas as ferramentas ACE, mas os jogos “STALKER 2 Heart of Chernobyl” e “Fort Solis“ usarão o “Omniverse Audio2Face”, que combina a animação facial de um personagem 3D com a fala do dublador.
Assista ao vídeo abaixo:
