NVIDIA ACE dá vida a personagens virtuais com IA generativa
O brilhantismo da Inteligência Artificial continua e Nvidia não quer ficar para trás e é que recentemente acaba de mostrar sua nova plataforma "Avatar Cloud Engine (ACE)" e as capacidades desta plataforma impressionaram a muitos, pois chamou atenção especial por permitir que os jogadores falem naturalmente com personagens não jogáveis (NPCs). ) e receba as respostas apropriadas.
Com essa novidade, o futuro dos videogames pode tomar outro rumo, principalmente nos títulos de mundo aberto, que podem criar uma nova experiência e, principalmente, aumentar as expectativas dos mundos virtuais.
Nvidia Apresento «Avatar Cloud Engine» durante a Computex 2023, com uma demo chamada Kairos apresentando um jogador (humano) conversando com um NPC chamado Jin em uma loja de ramen de aparência distópica. No evento, a Nvidia apresentou a demo como uma prévia do que poderia ser a colisão entre videogames e IA.
Desde a recente descoberta do LLM, foram feitas tentativas de usar esses sistemas de IA em videogames para permitir um diálogo dinâmico com personagens não-jogadores (NPCs) e a Nvidia acaba de revelar uma tentativa bem-sucedida de um projeto para criar um diálogo com um NPC.
No evento Computex 2023, Jensen Huang, CEO da Nvidia, apresentou:
"Avatar Cloud Engine (ACE) para jogos" . É um serviço de casting de modelos de IA, projetado para dar vida aos personagens do jogo por meio de conversas em linguagem natural, expressão facial e recursos de conversão de texto em fala/fala em texto.
Na demonstração, o jogador (chamado Kai) entra na loja de ramen de Jin, pergunta como ele está (narração) e comenta que o bairro tem um alto índice de criminalidade. Kai pergunta se ele pode ajudá-lo e Jin responde:
"Se você quiser fazer alguma coisa, ouvi rumores de que o poderoso senhor do crime Kumon Aoki está causando todo tipo de caos na cidade."
Jin acrescentou que acha que Aoki provavelmente está por trás da violência. Kai pergunta onde encontrar Aoki e Jin diz a ele, o que coloca o usuário no caminho da busca.
“A IA contribuirá não só para a redefinição e síntese do ambiente, mas também para a animação das personagens. A IA desempenhará um papel muito importante no futuro dos videogames”, disse o CEO da Nvidia.
A demonstração foi feito pela Nvidia e seu parceiro Convai para promover as ferramentas usadas para criá-lo.
"Com o Nvidia ACE for Games, o conjunto de ferramentas da Convai pode atingir a latência e a qualidade necessárias para tornar os personagens de IA não jogáveis acessíveis de maneira econômica a quase qualquer desenvolvedor", disse Purnendu Mukherjee, fundador e CEO da Convai.
Claro, a demonstração não usa apenas essas ferramentas. Está construído no Unreal Engine 5, el mecanismo de videogame desenvolvido pela Epic Game, com toneladas de traçado de raios. Segundo a Nvidia, os modelos de IA que compõem o ACE variam em tamanho, desempenho e qualidade.
Huang estava muito otimista sobre os últimos desenvolvimentos da Nvidia em IA, especialmente IA generativa e com esta demonstração, menciona que é uma prévia do que poderia ser a colisão entre jogos e IA.
Nvidia ACE consiste em três elementos distintos: NeMo, Riva e Omniverse Audio2Face:
- nemo fornece excelentes modelos de linguagem que os desenvolvedores podem personalizar com dados de história e diálogo.
- Riva ele pode reconhecer fala e converter texto em áudio, permitindo conversas ao vivo com o NeMo. Áudio2Face converte a saída de áudio de Riva em animações faciais que podem ser usadas, por exemplo, para controlar personagens MetaHuman no Unreal Engine 5 via Omniverse Links.
Por fim, vale mencionar que, além do ACE for Games, a Nvidia anunciou uma série de outras colaborações e produtos, incluindo o supercomputador DGX GH200 AI, que possui 256 chips Grace Hopper com um total de 144 terabytes de memória e oferece IA de ponta. escala. De acordo com a Nvidia, o DGX GH200 GPT-3 é 2,2 vezes mais rápido que um cluster DGX H100.
Por fim, se você estiver interessado em saber mais sobre o assunto, consulte os detalhes em o seguinte link.