NVIDIA ACE erweckt virtuelle Charaktere mit generativer KI zum Leben
Die Brillanz der künstlichen Intelligenz geht weiter und weiter Nvidia will nicht abgehängt werden und es ist so, dass es gerade erst seine neue Plattform „Avatar Cloud Engine (ACE)“ vorgestellt hat und die Fähigkeiten dieser Plattform viele beeindruckt haben, da sie besondere Aufmerksamkeit auf sich zog, weil sie es Spielern ermöglicht, auf natürliche Weise mit nicht spielbaren Charakteren (NPCs) zu sprechen. ) und erhalten Sie die passenden Antworten.
Mit dieser Nachricht könnte die Zukunft der Videospiele eine andere Richtung einschlagen, insbesondere bei Open-World-Titeln, die ein neues Erlebnis schaffen und vor allem die Erwartungen an virtuelle Welten steigern könnten.
Nvidia Ich präsentiere «Avatar Cloud Engine» während der Computex 2023, mit einer Demo namens Kairos, in der ein (menschlicher) Spieler mit einem NPC namens Jin in einem dystopisch aussehenden Ramen-Laden spricht. Auf der Veranstaltung präsentierte Nvidia die Demo als Vorschau auf die mögliche Kollision zwischen Videospielen und KI.
Seit dem jüngsten LLM-Durchbruch wurden Versuche unternommen, solche KI-Systeme in Videospielen einzusetzen, um einen dynamischen Dialog mit Nicht-Spieler-Charakteren (NPCs) zu ermöglichen, und Nvidia hat gerade einen erfolgreichen Versuch eines Projekts vorgestellt, das einen Dialog mit einem NPC ermöglicht.
Auf der Computex 2023-Veranstaltung Jensen Huang, CEO von Nvidia, präsentierte:
„Avatar Cloud Engine (ACE) für Gaming“ . Es handelt sich um einen KI-Modell-Casting-Dienst, der Spielcharaktere durch Gespräche in natürlicher Sprache, akustische Gesichtsausdrücke und Text-to-Speech-/Speech-to-Text-Funktionen zum Leben erwecken soll.
In der Demo Der Spieler (mit dem Namen Kai) betritt Jins Ramen-Laden, fragt, wie es ihm geht (aus dem Off) und bemerkt, dass in der Nachbarschaft eine hohe Kriminalitätsrate herrscht. Kai fragt, ob er ihm helfen kann und Jin antwortet:
„Wenn Sie etwas unternehmen möchten, ich habe Gerüchte gehört, dass der mächtige Verbrecherboss Kumon Aoki allerlei Chaos in der Stadt verursacht.“
Jin fügte hinzu, dass er der Meinung sei, dass Aoki wahrscheinlich hinter der Gewalt steckt. Kai fragt, wo Aoki zu finden ist und Jin sagt es ihm, was den Benutzer auf den Weg zur Suche bringt.
„KI wird nicht nur zur Neudefinition und Synthese der Umgebung beitragen, sondern auch zur Animation der Charaktere. „KI wird in der Zukunft von Videospielen eine sehr wichtige Rolle spielen“, sagte der Nvidia-CEO.
die Demo wurde von Nvidia und seinem Partner Convai entwickelt um die Werkzeuge zu fördern, mit denen es erstellt wurde.
„Mit Nvidia ACE for Games kann das Toolset von Convai die erforderliche Latenz und Qualität erreichen, um nicht spielbare KI-Charaktere für fast jeden Entwickler kostengünstig zugänglich zu machen“, sagte Purnendu Mukherjee, Gründer und CEO von Convai.
Natürlich werden in der Demo nicht nur diese Tools verwendet. Das basierend auf der Unreal Engine 5, el Videospiel-Engine, entwickelt von Epic Game, mit tonnenweise Raytracing. Laut Nvidia unterscheiden sich die KI-Modelle, aus denen ACE besteht, in Größe, Leistung und Qualität.
Huang zeigte sich sehr optimistisch hinsichtlich der neuesten Entwicklungen von Nvidia im Bereich KI, insbesondere der generativen KI, und mit dieser Demo erwähnt, dass es sich um eine Vorschau auf die mögliche Kollision zwischen Spielen und KI handelt.
Nvidia ACE besteht aus drei verschiedenen Elementen: NeMo, Riva und Omniverse Audio2Face:
- Nemo bietet hervorragende Sprachmodelle, die Entwickler mit Story- und Dialogdaten anpassen können.
- Riva Es kann Sprache erkennen und Text in Audio umwandeln, sodass Live-Gespräche mit NeMo möglich sind. Audio2Face wandelt Rivas Audioausgabe in Gesichtsanimationen um, die beispielsweise zur Steuerung von MetaHuman-Charakteren in Unreal Engine 5 über Omniverse Links verwendet werden können.
Abschließend ist noch zu erwähnen, dass Nvidia neben ACE for Games noch eine Reihe weiterer Kooperationen und Produkte angekündigt hat, darunter den KI-Supercomputer DGX GH200, der über 256 Grace-Hopper-Chips mit insgesamt 144 Terabyte Speicher verfügt und High-End-KI liefert Leistung. Maßstab. Laut Nvidia ist der DGX GH200 GPT-3 2,2-mal schneller als ein DGX H100-Cluster.
Schließlich, wenn Sie daran interessiert sind, mehr darüber zu erfahren, können Sie die Details in . einsehen den folgenden Link.