NVIDIA ACE bringer virtuelle karakterer til live med generativ AI
Briljansen av kunstig intelligens fortsetter og Nvidia ønsker ikke å stå bak og det er at den nylig har vist sin nye plattform "Avatar Cloud Engine (ACE)", og egenskapene til denne plattformen imponerte mange, siden den trakk spesiell oppmerksomhet fordi den lar spillere snakke naturlig med ikke-spillbare karakterer (NPC). ) og motta de riktige svarene.
Med denne nyheten kan fremtiden til videospill ta en annen retning, spesielt i åpne verden-titler, som kan skape en ny opplevelse og fremfor alt øke forventningene til virtuelle verdener.
Nvidia Jeg presenterer «Avatar Cloud Engine» under Computex 2023, med en demo kalt Kairos med en (menneskelig) spiller som snakker med en NPC ved navn Jin i en dystopisk ramen-butikk. På arrangementet presenterte Nvidia demoen som en forhåndsvisning av hva som kan være kollisjonen mellom videospill og AI.
Siden det nylige LLM-gjennombruddet har det blitt gjort forsøk på å bruke slike AI-systemer i videospill for å muliggjøre dynamisk dialog med ikke-spillerfigurer (NPCer), og Nvidia har nettopp avduket et vellykket forsøk på et prosjekt for å skape en dialog med en NPC.
På Computex 2023-arrangementet, Jensen Huang, administrerende direktør i Nvidia, presenterte:
"Avatar Cloud Engine (ACE) for gaming" . Det er en AI-modellcasting-tjeneste, designet for å bringe spillkarakterer til live gjennom samtaler med naturlig språk, lyd-ansiktsuttrykk og tekst-til-tale/tale-til-tekst-funksjoner.
I demoen, spilleren (kalt Kai) går inn i Jins ramen-butikk, spør hvordan han har det (voiceover), og kommenterer at nabolaget har en høy kriminalitetsrate. Kai spør om han kan hjelpe ham og Jin svarer:
"Hvis du vil gjøre noe, har jeg hørt rykter om at den mektige kriminalherren Kumon Aoki forårsaker all slags kaos i byen."
Jin la til at han tror Aoki sannsynligvis står bak volden. Kai spør hvor han skal finne Aoki og Jin forteller ham, noe som setter brukeren på vei til å søke.
"AI vil ikke bare bidra til redefinering og syntese av miljøet, men også til animasjonen av karakterene. AI kommer til å spille en veldig viktig rolle i fremtiden til videospill," sa Nvidia-sjefen.
demoen ble laget av Nvidia og partneren Convai å fremme verktøyene som brukes til å lage den.
"Med Nvidia ACE for Games kan Convais verktøysett oppnå ventetiden og kvaliteten som trengs for å gjøre ikke-spillbare AI-karakterer kostnadseffektivt tilgjengelige for nesten alle utviklere," sa Purnendu Mukherjee, grunnlegger og administrerende direktør i Convai.
Selvfølgelig bruker demoen ikke bare disse verktøyene. Dette bygget på Unreal Engine 5, el videospillmotor utviklet av Epic Game, med tonnevis av strålesporing. Ifølge Nvidia varierer AI-modellene som utgjør ACE i størrelse, ytelse og kvalitet.
Huang var veldig optimistisk angående Nvidias siste utvikling innen AI, spesielt generativ AI, og med denne demoen, nevner at det er en forhåndsvisning av hva som kan være kollisjonen mellom spill og AI.
Nvidia ACE består av tre forskjellige elementer: NeMo, Riva og Omniverse Audio2Face:
- nemo gir utmerkede språkmodeller som utviklere kan tilpasse med historie- og dialogdata.
- Riva den kan gjenkjenne tale og konvertere tekst til lyd, noe som gir mulighet for direkte samtaler med NeMo. Audio2Face konverterer Rivas lydutgang til ansiktsanimasjoner som for eksempel kan brukes til å kontrollere MetaHuman-karakterer i Unreal Engine 5 via Omniverse Links.
Til slutt er det verdt å nevne at i tillegg til ACE for Games, kunngjorde Nvidia en rekke andre samarbeid og produkter, inkludert DGX GH200 AI-superdatamaskinen, som har 256 Grace Hopper-brikker med totalt 144 terabyte minne og leverer high-end AI ytelse skala. I følge Nvidia er DGX GH200 GPT-3 2,2 ganger raskere enn en DGX H100-klynge.
Til slutt, hvis du er interessert i å kunne vite mer om det, kan du se detaljene i følgende lenke.