NVIDIA ACE bringer virtuelle karakterer til live med generativ AI
Glansen af kunstig intelligens fortsætter og Nvidia ønsker ikke at stå tilbage og det er, at den for nylig har vist sin nye platform "Avatar Cloud Engine (ACE)", og denne platforms muligheder imponerede mange, da den tiltrak sig særlig opmærksomhed, fordi den tillader spillere at tale naturligt med ikke-spilbare karakterer (NPC'er). ) og modtage de relevante svar.
Med denne nyhed kan fremtiden for videospil tage en anden retning, især i open world-titler, som kan skabe en ny oplevelse og frem for alt øge forventningerne til virtuelle verdener.
Nvidia Jeg præsenterer «Avatar Cloud Engine» under Computex 2023, med en demo kaldet Kairos med en (menneskelig) spiller, der taler med en NPC ved navn Jin i en dystopisk udseende ramen-butik. Ved begivenheden præsenterede Nvidia demoen som et eksempel på, hvad der kunne være kollisionen mellem videospil og AI.
Siden det nylige LLM-gennembrud er der blevet gjort forsøg på at bruge sådanne AI-systemer i videospil for at muliggøre dynamisk dialog med ikke-spillerfigurer (NPC'er), og Nvidia har netop afsløret et succesfuldt forsøg på et projekt for at skabe en dialog med en NPC.
Ved Computex 2023-arrangementet, Jensen Huang, administrerende direktør for Nvidia, præsenterede:
"Avatar Cloud Engine (ACE) til spil". Det er en AI-modelcasting-tjeneste, designet til at bringe spilkarakterer til live gennem samtaler med naturlige sprog, lyd-ansigtsudtryk og tekst-til-tale/tale-til-tekst-funktioner.
I demoen, spilleren (ved navn Kai) går ind i Jins ramen-butik, spørger, hvordan han har det (voiceover), og kommenterer, at nabolaget har en høj kriminalitetsrate. Kai spørger, om han kan hjælpe ham, og Jin svarer:
"Hvis du vil gøre noget, har jeg hørt rygter om, at den magtfulde forbryderherre Kumon Aoki forårsager alle former for kaos i byen."
Jin tilføjede, at han tror, at Aoki sandsynligvis står bag volden. Kai spørger, hvor han kan finde Aoki, og Jin fortæller ham, hvilket sætter brugeren på vej til at søge.
“AI vil ikke kun bidrage til omdefinering og syntese af miljøet, men også til animationen af karaktererne. AI vil spille en meget vigtig rolle i fremtiden for videospil,” sagde Nvidia CEO.
demonstrationen blev lavet af Nvidia og dets partner Convai at fremme de værktøjer, der bruges til at skabe det.
"Med Nvidia ACE til spil kan Convais værktøjssæt opnå den ventetid og kvalitet, der er nødvendig for at gøre ikke-spilbare AI-karakterer omkostningseffektivt tilgængelige for næsten enhver udvikler," sagde Purnendu Mukherjee, grundlægger og administrerende direktør for Convai.
Selvfølgelig bruger demoen ikke kun disse værktøjer. Det her bygget på Unreal Engine 5, el videospilmotor udviklet af Epic Game, med tonsvis af strålesporing. Ifølge Nvidia varierer AI-modellerne, der udgør ACE, i størrelse, ydeevne og kvalitet.
Huang var meget optimistisk omkring Nvidias seneste udvikling inden for AI, især generativ AI, og med denne demo, nævner, at det er en forhåndsvisning af, hvad der kunne være kollisionen mellem spil og AI.
Nvidia ACE består af tre forskellige elementer: NeMo, Riva og Omniverse Audio2Face:
- nemo giver fremragende sprogmodeller, som udviklere kan tilpasse med historie- og dialogdata.
- Riva den kan genkende tale og konvertere tekst til lyd, hvilket giver mulighed for live-samtaler med NeMo. Audio2Face konverterer Rivas lydoutput til ansigtsanimationer, der for eksempel kan bruges til at styre MetaHuman-karakterer i Unreal Engine 5 via Omniverse Links.
Endelig er det værd at nævne, at udover ACE for Games annoncerede Nvidia en række andre samarbejder og produkter, herunder DGX GH200 AI-supercomputeren, som har 256 Grace Hopper-chips med i alt 144 terabyte hukommelse og leverer high-end AI ydeevne skala. Ifølge Nvidia er DGX GH200 GPT-3 2,2 gange hurtigere end en DGX H100-klynge.
Endelig, hvis du er interesseret i at kunne vide mere om det, kan du se detaljerne i følgende link.