NVIDIA ACE dóna vida als personatges virtuals amb IA generativa
El fulgor de les Intel·ligències Artificials continua i Nvidia no es vol quedar enrere i és que fa poc acaba de mostrar la nova plataforma «Avatar Cloud Engine (ACE)» i les capacitats d'aquesta plataforma impressiono molts, ja que va cridar especialment l'atenció perquè permet que els jugadors parlin de manera natural amb personatges no jugables (NPC) ) i rebin les respostes adequades.
Amb aquesta notícia el futur dels videojocs podria prendre un altre rumb i en especial en títols de món obert, cosa que podria crear una nova experiència i sobretot augmentar les expectatives de mons virtuals.
Nvidia presento «Avatar Cloud Engine» durant el Computex 2023, amb una demostració anomenada Kairos amb un jugador (humà) parlant amb un NPC anomenat Jin en una botiga de ramen d'aspecte distòpic. A l'esdeveniment, Nvidia va presentar la demo com un avenç del que podria ser la col·lisió entre els videojocs i la IA.
Des del recent avenç de LLM, s'han realitzat intents d'utilitzar aquests sistemes d'IA als videojocs per permetre el diàleg dinàmic amb personatges que no són jugadors (NPC) i Nvidia acaba de presentar un intent d'èxit d'un projecte per crear un diàleg amb un NPC.
A l'esdeveniment Computex 2023, Jensen Huang, CEO de Nvidia, va presentar:
Avatar Cloud Engine (ACE) per a jocs. És un servei de fosa de models de IA, dissenyat per donar vida als personatges dels jocs mitjançant converses en llenguatge natural, expressió audiofacial i capacitats de text a veu/de veu a text.
A la demostració, el jugador (anomenat Kai) entra a la botiga de ramen de Jin, li pregunta com li va (en veu) i comenta que el veïnat té un alt índex de criminalitat. Kai li pregunta si pot ajudar-lo i Jin respon:
» Si vols fer alguna cosa, he sentit rumors que el poderós senyor del crim Kumon Aoki està causant tota mena de caos a la ciutat».
Jin va afegir que creu que Aoki probablement estigui darrere de la violència. Kai pregunta on trobar Aoki i Jin li diu, el que posa lusuari en el camí per buscar.
“La IA no només contribuirà a la redefinició i la síntesi de l'entorn, sinó també a l'animació dels personatges. La IA jugarà un paper molt important en el futur dels videojocs”, va dir el CEO de Nvidia.
La demostració va ser realitzada per Nvidia i el seu soci Convai per promocionar les eines utilitzades per crear-la.
"Amb Nvidia ACE for Games, el conjunt d'eines de Convai pot aconseguir la latència i la qualitat necessàries per fer que els personatges d'IA no jugables siguin accessibles de manera rendible per a gairebé qualsevol desenvolupador", va dir Purnendu Mukherjee, fundador i director executiu de Convai.
Per descomptat, la demostració no només utilitza aquestes eines. Està construït a Unreal Engine 5, el motor de videojocs desenvolupat per Epic Game, amb tones de traçat de raigs. Segons Nvidia, els models de IA que componen ACE varien en mida, rendiment i qualitat.
Huang es va mostrar molt optimista sobre els darrers desenvolupaments de Nvidia a IA, especialment la IA generativa i amb aquesta demostració, esmenta que és un avenç del que podria ser la col·lisió entre els jocs i la IA.
Nvidia ACE consta de tres elements diferents: NeMo, Riva i Omniverse Audio2Face:
- NeMo proporciona excel·lents models de llenguatge que els desenvolupadors poden personalitzar amb dades dhistòries i diàlegs.
- Riva pot reconèixer la parla i convertir text a àudio, cosa que permet converses en viu amb NeMo. Audio2Face converteix la sortida d'àudio de Riva en animacions facials que es poden fer servir, per exemple, per controlar personatges MetaHuman a Unreal Engine 5 a través d'Omniverse Links.
Finalment cal esmentar que a més d'ACE for Games, Nvidia va anunciar una sèrie d'altres col·laboracions i productes, inclosa la supercomputadora DGX GH200 AI, que compta amb 256 xips Grace Hopper amb un total de 144 terabytes de memòria i ofereix un rendiment d'IA de gran escala. Segons Nvidia, el DGX GH200 GPT-3 és 2,2 vegades més ràpid que un clúster DGX H100.
Finalment si estàs interessat en poder conèixer més a l'respecte, pots consultar els detalls a el següent enllaç.