Binubuhay ng NVIDIA ACE ang mga virtual na character gamit ang generative AI
Ang kinang ng Artificial Intelligence ay nagpapatuloy at Ayaw ng Nvidia na maiwan at ito ay kamakailan lamang na ipinakita nito ang bagong platform nito na "Avatar Cloud Engine (ACE)" at ang mga kakayahan ng platform na ito ay humanga sa marami, dahil nakakuha ito ng espesyal na atensyon dahil pinapayagan nito ang mga manlalaro na magsalita nang natural sa mga hindi puwedeng laruin na mga character (NPC). ) at tumanggap ng angkop na mga sagot.
Sa balitang ito, ang kinabukasan ng mga video game ay maaaring kumuha ng ibang direksyon, lalo na sa mga open world title, na maaaring lumikha ng bagong karanasan at, higit sa lahat, pataasin ang mga inaasahan ng mga virtual na mundo.
NVIDIA Ipinakita ko ang «Avatar Cloud Engine» sa panahon ng Computex 2023, na may demo na tinatawag na Kairos na nagtatampok ng isang (tao) na manlalaro na nakikipag-usap sa isang NPC na nagngangalang Jin sa isang dystopian na mukhang ramen shop. Sa kaganapan, ipinakita ni Nvidia ang demo bilang isang preview ng kung ano ang maaaring maging banggaan sa pagitan ng mga video game at AI.
Mula noong kamakailang pambihirang tagumpay ng LLM, ginawa ang mga pagtatangka na gamitin ang mga naturang AI system sa mga video game upang paganahin ang dynamic na pag-uusap sa mga non-player character (NPCs) at ang Nvidia ay nag-unveil lang ng matagumpay na pagtatangka sa isang proyekto upang lumikha ng isang dialogue sa isang NPC.
Sa kaganapan ng Computex 2023, Si Jensen Huang, CEO ng Nvidia, ay nagpakita:
"Avatar Cloud Engine (ACE) para sa Gaming". Isa itong serbisyo sa pag-cast ng modelo ng AI, na idinisenyo upang bigyang-buhay ang mga character ng laro sa pamamagitan ng mga natural na pag-uusap sa wika, audio-facial expression, at text-to-speech/speech-to-text na mga kakayahan.
Sa demo, ang manlalaro (nagngangalang Kai) ay pumasok sa ramen shop ni Jin, nagtanong kung kumusta siya (voiceover), at nagkomento na ang kapitbahayan ay may mataas na antas ng krimen. Tinanong ni Kai kung matutulungan niya siya at sumagot si Jin:
"Kung may gusto kang gawin, may narinig akong tsismis na ang makapangyarihang crime lord na si Kumon Aoki ang nagdudulot ng lahat ng uri ng kaguluhan sa lungsod."
Idinagdag ni Jin na sa tingin niya ay malamang si Aoki ang nasa likod ng karahasan. Nagtanong si Kai kung saan hahanapin si Aoki at sinabi ni Jin sa kanya, na naglalagay sa user sa landas para maghanap.
"Ang AI ay hindi lamang mag-aambag sa redefinition at synthesis ng kapaligiran, kundi pati na rin sa animation ng mga character. Ang AI ay gaganap ng napakahalagang papel sa hinaharap ng mga video game, "sabi ng Nvidia CEO.
ang demonstrasyon ay ginawa ng Nvidia at ng partner nitong si Convai upang i-promote ang mga tool na ginamit sa paglikha nito.
"Gamit ang Nvidia ACE para sa Mga Laro, makakamit ng toolset ng Convai ang latency at kalidad na kailangan para gawing cost-effective na naa-access ang mga hindi nape-play na AI character sa halos anumang developer," sabi ni Purnendu Mukherjee, Founder at CEO ng Convai.
Siyempre, hindi lang ginagamit ng demo ang mga tool na ito. Ito binuo sa Unreal Engine 5, el video game engine na binuo ng Epic Game, na may tonelada ng ray tracing. Ayon sa Nvidia, ang mga modelo ng AI na bumubuo sa ACE ay nag-iiba sa laki, pagganap, at kalidad.
Si Huang ay napaka-optimistiko tungkol sa mga pinakabagong pag-unlad ng Nvidia sa AI, lalo na ang generative AI at sa demo na ito, binanggit na ito ay isang preview ng kung ano ang maaaring maging banggaan sa pagitan ng mga laro at AI.
Ang Nvidia ACE ay binubuo ng tatlong natatanging elemento: NeMo, Riva, at Omniverse Audio2Face:
- nemo nagbibigay ng mahuhusay na modelo ng wika na maaaring i-customize ng mga developer gamit ang data ng kuwento at diyalogo.
- Riva maaari nitong makilala ang pagsasalita at i-convert ang teksto sa audio, na nagbibigay-daan para sa mga live na pakikipag-usap sa NeMo. Audio2Mukha kino-convert ang audio output ni Riva sa mga facial animation na maaaring gamitin, halimbawa, upang kontrolin ang mga MetaHuman character sa Unreal Engine 5 sa pamamagitan ng Omniverse Links.
Sa wakas, ito ay nagkakahalaga ng pagbanggit na bilang karagdagan sa ACE para sa Mga Laro, ang Nvidia ay nag-anunsyo ng ilang iba pang mga pakikipagtulungan at produkto, kabilang ang DGX GH200 AI supercomputer, na nagtatampok ng 256 Grace Hopper chips na may kabuuang 144 terabytes ng memorya at nag-aalok ng high-end Pagganap ng AI. sukat. Ayon sa Nvidia, ang DGX GH200 GPT-3 ay 2,2 beses na mas mabilis kaysa sa isang DGX H100 cluster.
Panghuli, kung interesado kang malaman ang tungkol dito, maaari kang kumunsulta sa mga detalye sa ang sumusunod na link.