NVIDIA ACE вдъхва живот на виртуалните герои с генеративен AI
Блясъкът на изкуствения интелект продължава и Nvidia не иска да бъде изоставена и това е, че наскоро току-що показа новата си платформа „Avatar Cloud Engine (ACE)“ и възможностите на тази платформа впечатлиха мнозина, тъй като тя привлече специално внимание, защото позволява на играчите да говорят естествено с неиграеми герои (NPC). ) и получете подходящите отговори.
С тази новина бъдещето на видеоигрите може да поеме в друга посока, особено в заглавията с отворен свят, които биха могли да създадат ново изживяване и най-вече да увеличат очакванията към виртуалните светове.
Nvidia Представям «Avatar Cloud Engine» по време на Computex 2023, с демонстрация, наречена Kairos, включваща (човешки) играч, който говори с NPC на име Jin в антиутопично изглеждащ магазин за рамен. На събитието Nvidia представи демонстрацията като предварителен преглед на това какво може да бъде сблъсъкът между видеоигрите и AI.
След неотдавнашния пробив в LLM бяха направени опити да се използват такива AI системи във видеоигрите, за да се даде възможност за динамичен диалог с не-играещи герои (NPC) и Nvidia току-що разкри успешен опит за проект за създаване на диалог с NPC.
На събитието Computex 2023, Дженсън Хуанг, главен изпълнителен директор на Nvidia, представи:
„Avatar Cloud Engine (ACE) за игри“. Това е услуга за кастинг на модели с изкуствен интелект, предназначена да вдъхне живот на игровите герои чрез разговори на естествен език, аудио-изражение на лицето и възможности за текст към говор/говор към текст.
В демонстрацията, играчът (на име Kai) влиза в магазина за рамен на Jin, пита го как се справя (глас зад кадър) и коментира, че в квартала има високо ниво на престъпност. Кай пита дали може да му помогне и Джин отговаря:
„Ако искате да направите нещо, чух слухове, че могъщият престъпен бос Кумон Аоки причинява всякакъв хаос в града.“
Джин добави, че смята, че Аоки вероятно стои зад насилието. Kai пита къде да намери Aoki и Jin му казва, което поставя потребителя на пътя за търсене.
„AI не само ще допринесе за предефинирането и синтеза на околната среда, но и за анимацията на героите. AI ще играе много важна роля в бъдещето на видеоигрите“, каза изпълнителният директор на Nvidia.
демото е направено от Nvidia и нейния партньор Convai за популяризиране на инструментите, използвани за създаването му.
„С Nvidia ACE за игри, наборът от инструменти на Convai може да постигне латентността и качеството, необходими, за да направи неиграеми AI герои рентабилно достъпни за почти всеки разработчик,“ каза Пурненду Мукерджи, основател и главен изпълнителен директор на Convai.
Разбира се, демонстрацията не използва само тези инструменти. Това изграден на Unreal Engine 5, el двигател за видеоигри, разработен от Epic Game, с тонове проследяване на лъчи. Според Nvidia моделите на AI, които съставят ACE, се различават по размер, производителност и качество.
Хуанг беше много оптимистично настроен относно най-новите разработки на Nvidia в AI, особено генеративния AI и с тази демонстрация, споменава, че това е предварителен преглед на това, което може да бъде сблъсъкът между игрите и AI.
Nvidia ACE се състои от три отделни елемента: NeMo, Riva и Omniverse Audio2Face:
- НеМо предоставя отлични езикови модели, които разработчиците могат да персонализират с история и данни за диалог.
- Riva може да разпознава реч и да преобразува текст в аудио, позволявайки разговори на живо с NeMo. Audio2Face преобразува аудио изхода на Riva в лицеви анимации, които могат да се използват, например, за контролиране на MetaHuman герои в Unreal Engine 5 чрез Omniverse Links.
И накрая, струва си да споменем, че в допълнение към ACE for Games, Nvidia обяви редица други сътрудничества и продукти, включително суперкомпютъра DGX GH200 AI, който разполага с 256 чипа Grace Hopper с общо 144 терабайта памет и предоставя висок клас AI производителност мащаб. Според Nvidia, DGX GH200 GPT-3 е 2,2 пъти по-бърз от DGX H100 клъстер.
И накрая, ако имате интерес да научите повече за него, можете да се консултирате с подробностите в следната връзка.