NVIDIA ACE donne vie aux personnages virtuels grâce à l'IA générative
L'éclat de l'Intelligence Artificielle continue et Nvidia ne veut pas être en reste et c'est que récemment, il vient de montrer sa nouvelle plate-forme "Avatar Cloud Engine (ACE)" et les capacités de cette plate-forme en ont impressionné beaucoup, car elle a attiré une attention particulière car elle permet aux joueurs de parler naturellement avec des personnages non jouables (PNJ). ) et recevoir les réponses appropriées.
Avec cette nouvelle, l'avenir des jeux vidéo pourrait prendre une autre direction, notamment dans les titres du monde ouvert, ce qui pourrait créer une nouvelle expérience et, surtout, augmenter les attentes des mondes virtuels.
Nvidia Je présente « Avatar Cloud Engine » lors du Computex 2023, avec une démo appelée Kairos mettant en vedette un joueur (humain) parlant à un PNJ nommé Jin dans un magasin de ramen à l'aspect dystopique. Lors de l'événement, Nvidia a présenté la démo comme un aperçu de ce que pourrait être la collision entre les jeux vidéo et l'IA.
Depuis la récente percée de LLM, des tentatives ont été faites pour utiliser de tels systèmes d'IA dans les jeux vidéo pour permettre un dialogue dynamique avec des personnages non-joueurs (PNJ) et Nvidia vient de dévoiler une tentative réussie d'un projet visant à créer un dialogue avec un PNJ.
Lors de l'événement Computex 2023, Jensen Huang, PDG de Nvidia, a présenté :
"Avatar Cloud Engine (ACE) pour les jeux". Il s'agit d'un service de casting de modèles d'IA, conçu pour donner vie aux personnages du jeu par le biais de conversations en langage naturel, d'expression audio-faciale et de capacités de synthèse vocale/parole-texte.
Dans la démo, le joueur (nommé Kai) entre dans le magasin de ramen de Jin, demande comment il va (voix off) et commente que le quartier a un taux de criminalité élevé. Kai demande s'il peut l'aider et Jin répond :
"Si vous voulez faire quelque chose, j'ai entendu des rumeurs selon lesquelles le puissant seigneur du crime Kumon Aoki causerait toutes sortes de chaos dans la ville."
Jin a ajouté qu'il pense qu'Aoki est probablement derrière la violence. Kai demande où trouver Aoki et Jin lui dit, ce qui met l'utilisateur sur le chemin de la recherche.
« L'IA contribuera non seulement à la redéfinition et à la synthèse de l'environnement, mais aussi à l'animation des personnages. L'IA jouera un rôle très important dans l'avenir des jeux vidéo », a déclaré le PDG de Nvidia.
la démonstration a été réalisé par Nvidia et son partenaire Convai promouvoir les outils utilisés pour le créer.
"Avec Nvidia ACE for Games, l'ensemble d'outils de Convai peut atteindre la latence et la qualité nécessaires pour rendre les personnages IA non jouables accessibles de manière rentable à presque tous les développeurs", a déclaré Purnendu Mukherjee, fondateur et PDG de Convai.
Bien sûr, la démo n'utilise pas seulement ces outils. Ce construit sur Unreal Engine 5, el moteur de jeu vidéo développé par Epic Game, avec des tonnes de lancer de rayons. Selon Nvidia, les modèles d'IA qui composent ACE varient en taille, en performances et en qualité.
Huang était très optimiste quant aux derniers développements de Nvidia en matière d'IA, en particulier l'IA générative et avec cette démo, mentionne qu'il s'agit d'un aperçu de ce que pourrait être la collision entre les jeux et l'IA.
Nvidia ACE se compose de trois éléments distincts : NeMo, Riva et Omniverse Audio2Face :
- Némo fournit d'excellents modèles de langage que les développeurs peuvent personnaliser avec des données d'histoire et de dialogue.
- Riva il peut reconnaître la parole et convertir du texte en audio, permettant des conversations en direct avec NeMo. Audio2Face convertit la sortie audio de Riva en animations faciales qui peuvent être utilisées, par exemple, pour contrôler les personnages MetaHuman dans Unreal Engine 5 via Omniverse Links.
Enfin, il convient de mentionner qu'en plus d'ACE for Games, Nvidia a annoncé un certain nombre d'autres collaborations et produits, y compris le supercalculateur DGX GH200 AI, qui comprend 256 puces Grace Hopper avec un total de 144 téraoctets de mémoire et offre une IA haut de gamme performance. Selon Nvidia, le DGX GH200 GPT-3 est 2,2 fois plus rapide qu'un cluster DGX H100.
Enfin, si vous souhaitez en savoir plus, vous pouvez consulter les détails dans le lien suivant.