NVIDIA ACE оживляет виртуальных персонажей с помощью генеративного ИИ
Блеск искусственного интеллекта продолжается и Nvidia не хочет отставать и заключается в том, что недавно он только что показал свою новую платформу «Avatar Cloud Engine (ACE)», и возможности этой платформы многих впечатлили, поскольку привлекли особое внимание, поскольку позволяют игрокам естественно разговаривать с неигровыми персонажами (NPC). ) и получить соответствующие ответы.
С этой новостью будущее видеоигр может измениться, особенно в играх с открытым миром, которые могут создать новый опыт и, прежде всего, повысить ожидания от виртуальных миров.
Nvidia Представляю Avatar Cloud Engine на Computex 2023, с демонстрацией под названием Kairos, в которой игрок (человек) разговаривает с NPC по имени Джин в антиутопическом магазине рамэн. На мероприятии Nvidia представила демо как превью того, что может стать столкновением между видеоиграми и ИИ.
После недавнего прорыва в LLM были предприняты попытки использовать такие системы ИИ в видеоиграх для обеспечения динамического диалога с неигровыми персонажами (NPC), и Nvidia только что представила успешную попытку проекта по созданию диалога с NPC.
На выставке Computex 2023 г. Дженсен Хуанг, генеральный директор Nvidia, представил:
«Облачный движок Avatar (ACE) для игр». Это сервис кастинга моделей ИИ, предназначенный для оживления игровых персонажей с помощью разговоров на естественном языке, аудио-мимики и возможностей преобразования текста в речь/речь в текст.
В демо, игрок (по имени Кай) заходит в магазин рамэн Джина, спрашивает, как у него дела (за кадром), и комментирует, что в районе высокий уровень преступности. Кай спрашивает, может ли он помочь ему, и Джин отвечает:
«Если хочешь что-то сделать, до меня дошли слухи, что могущественный криминальный авторитет Кумон Аоки вызывает в городе всевозможный хаос».
Джин добавил, что, по его мнению, за насилием, вероятно, стоит Аоки. Кай спрашивает, где найти Аоки, и Джин говорит ему, что ставит пользователя на путь поиска.
«ИИ будет способствовать не только переопределению и синтезу окружающей среды, но и анимации персонажей. ИИ будет играть очень важную роль в будущем видеоигр», — сказал генеральный директор Nvidia.
демонстрация было сделано Nvidia и ее партнером Convai для продвижения инструментов, используемых для его создания.
«Благодаря Nvidia ACE for Games набор инструментов Convai может обеспечить задержку и качество, необходимые для того, чтобы сделать неигровых ИИ-персонажей экономически эффективными и доступными практически для любого разработчика», — сказал Пурненду Мукерджи, основатель и генеральный директор Convai.
Конечно, в демоверсии используются не только эти инструменты. Этот построен на Unreal Engine 5, el движок для видеоигр, разработанный Epic Game, с тоннами трассировки лучей. По данным Nvidia, модели ИИ, составляющие ACE, различаются по размеру, производительности и качеству.
Хуанг был очень оптимистичен в отношении последних разработок Nvidia в области ИИ, особенно генеративного ИИ, и с этой демонстрацией, упоминает, что это предварительный просмотр того, что может быть столкновением между играми и ИИ.
Nvidia ACE состоит из трех отдельных элементов: NeMo, Riva и Omniverse Audio2Face:
- НеМо предоставляет отличные языковые модели, которые разработчики могут настраивать с помощью данных истории и диалогов.
- Riva он может распознавать речь и преобразовывать текст в аудио, что позволяет вести живые разговоры с NeMo. Audio2Face преобразует аудиовыход Riva в лицевую анимацию, которую можно использовать, например, для управления персонажами MetaHuman в Unreal Engine 5 через Omniverse Links.
Наконец, стоит упомянуть, что помимо ACE for Games, Nvidia анонсировала ряд других совместных продуктов и продуктов, в том числе суперкомпьютер DGX GH200 AI, который оснащен 256 чипами Grace Hopper с общим объемом памяти 144 терабайт и обеспечивает высокопроизводительный ИИ. производительность масштаб. По данным Nvidia, кластер DGX GH200 GPT-3 в 2,2 раза быстрее, чем кластер DGX H100.
Наконец, если вы хотите узнать об этом больше, вы можете ознакомиться с подробностями в по следующей ссылке.