NVIDIA ACE aduce personaje virtuale la viață cu IA generativă
Strălucirea Inteligenței Artificiale continuă și Nvidia nu vrea să rămână în urmă și este că recent tocmai și-a arătat noua platformă „Avatar Cloud Engine (ACE)”, iar capacitățile acestei platforme i-au impresionat pe mulți, deoarece a atras atenția deosebită pentru că le permite jucătorilor să vorbească natural cu personaje nejucabile (NPC-uri). ) și primiți răspunsurile adecvate.
Odată cu această veste, viitorul jocurilor video ar putea lua o altă direcție, mai ales în titlurile open world, care ar putea crea o nouă experiență și, mai presus de toate, să crească așteptările lumilor virtuale.
Nvidia Vă prezint „Avatar Cloud Engine” în timpul Computex 2023, cu o demonstrație numită Kairos, în care un jucător (uman) vorbește cu un NPC pe nume Jin într-un magazin de ramen cu aspect distopic. La eveniment, Nvidia a prezentat demo-ul ca o previzualizare a ceea ce ar putea fi coliziunea dintre jocurile video și AI.
De la recenta descoperire LLM, s-au făcut încercări de a folosi astfel de sisteme AI în jocurile video pentru a permite dialogul dinamic cu personaje non-player (NPC-uri), iar Nvidia tocmai a dezvăluit o încercare de succes la un proiect de a crea un dialog cu un NPC.
La evenimentul Computex 2023, Jensen Huang, CEO al Nvidia, a prezentat:
„Avatar Cloud Engine (ACE) pentru jocuri”. Este un serviciu de casting de modele AI, conceput pentru a aduce personajele jocului la viață prin conversații în limbaj natural, expresii audio-faciale și capacități de text-to-vorbire/vorbire-to-text.
În demo, jucătorul (pe nume Kai) intră în magazinul de ramen al lui Jin, îl întreabă ce mai face (voce off) și comentează că cartierul are o rată ridicată a criminalității. Kai îl întreabă dacă îl poate ajuta și Jin răspunde:
„Dacă vrei să faci ceva, am auzit zvonuri că puternicul lord al crimei Kumon Aoki provoacă tot felul de haos în oraș”.
Jin a adăugat că el crede că Aoki este probabil în spatele violenței. Kai întreabă unde să-l găsească pe Aoki și Jin îi spune, ceea ce îl pune pe utilizator pe calea de căutare.
„AI nu va contribui doar la redefinirea și sinteza mediului, ci și la animarea personajelor. AI va juca un rol foarte important în viitorul jocurilor video”, a spus CEO-ul Nvidia.
demo-ul a fost realizat de Nvidia și partenerul său Convai pentru a promova instrumentele folosite pentru a-l crea.
„Cu Nvidia ACE for Games, setul de instrumente Convai poate atinge latența și calitatea necesare pentru a face personajele AI nejucabile accesibile în mod rentabil pentru aproape orice dezvoltator”, a declarat Purnendu Mukherjee, fondator și CEO al Convai.
Desigur, demonstrația nu folosește doar aceste instrumente. Acest construit pe Unreal Engine 5, el motor de jocuri video dezvoltat de Epic Game, cu tone de ray tracing. Potrivit Nvidia, modelele AI care compun ACE variază ca dimensiune, performanță și calitate.
Huang a fost foarte optimist cu privire la cele mai recente dezvoltări ale Nvidia în AI, în special AI generativă și cu această demonstrație, menționează că este o previzualizare a ceea ce ar putea fi coliziunea dintre jocuri și AI.
Nvidia ACE constă din trei elemente distincte: NeMo, Riva și Omniverse Audio2Face:
- nemo oferă modele de limbaj excelente pe care dezvoltatorii le pot personaliza cu date despre poveste și dialog.
- Riva poate recunoaște vorbirea și poate converti textul în audio, permițând conversații live cu NeMo. Audio2Face convertește ieșirea audio a lui Riva în animații faciale care pot fi folosite, de exemplu, pentru a controla personajele MetaHuman în Unreal Engine 5 prin Omniverse Links.
În cele din urmă, merită menționat faptul că, pe lângă ACE for Games, Nvidia a anunțat o serie de alte colaborări și produse, inclusiv supercomputerul DGX GH200 AI, care dispune de 256 de cipuri Grace Hopper cu un total de 144 de terabytes de memorie și oferă AI de vârf. performanţă.scale. Potrivit Nvidia, DGX GH200 GPT-3 este de 2,2 ori mai rapid decât un cluster DGX H100.
În cele din urmă, dacă sunteți interesat să puteți afla mai multe despre aceasta, puteți consulta detaliile în următorul link.