Nvidia将其AI化身带入游戏,他们可以实时与玩家互动。与声音对话。和面部动画
Nvidia刚刚在其Computex Keynote(其Omniverse Avatar Cloud Engine的一种版本)上宣布了ACE的ACE,以实时对游戏中的NPC进行动画表达 。
首席执行官詹森·黄(Jensen Huang)解释说 ,游戏的ACE集成了文本到语音,自然语言理解—或用黄的话语,“基本上是大型语言模型”—和自动面部动画师。全部在王牌下。
本质上,AI创建的NPC将听取玩家的输入 ,例如向NPC提出问题,然后产生一个字符的回答,说对话大声 ,并在他们说的话时对NPC的脸进行动画。
Huang还通过AI初创公司Convai在虚幻引擎5中精心制作的实时演示中展示了这项技术 。它设置在赛博朋克环境中,因为它当然是(对不起,凯蒂) ,并显示一家玩家走进拉面商店并与所有者交谈。所有者没有脚本对话,但可以实时回答玩家的问题,并将其送往临时任务。
您可以在这里自己观看演示 。
这是令人印象深刻的 ,无疑是一种探讨游戏将来如何利用这项技术的东西。正如黄所说:“ AI将是电子游戏未来的很大一部分。 ”
当然,他会这么说 。NVIDIA是AI需求突然激增,其AI加速器的销售最为收获。而且 ,我们已经看到了Chatgpt中的一些基本整合到游戏中,例如克里斯将其添加到他的天际同伴中,并且未能解决一个简单的难题。但是,这个新的ACE平台确实看起来更加精致 ,并且实时正确 。
我们不知道的是为游戏演示运行ACE所需的内容,只是它也在运行Ray Tracing和DLSS。它可能需要超过您的普通GeForce GPU立即运行,或者需要基于云的组件。黄对细节有些启示 ,但是我敢肯定,我们会听到有关此工具的更多信息,因为某些游戏实际上采取了使用的动作 。

“为游戏的NVIDIA ACE提供了针对不同功能 ,具有各种尺寸,性能和质量折衷的神经网络。游戏铸造厂服务的ACE将帮助开发人员为游戏的开发人员微调模型,然后通过NVIDIA DGX Cloud部署 ,GeForce RTX PC或在实时地下世界的前提中进行部署,” Nvidia说。”
“这些模型是针对潜伏期进行了优化的;对于游戏中沉浸式,响应式互动的关键要求。”
潜伏期在这里将是一个很大的 。我不想受到NPC等效的尴尬暂停 ,因为它在云中的响应中加载。
到目前为止,NVIDIA使用ACE的“ Audio2face ” ACE的面部动画技术组成的两款游戏确认了两款游戏。那是S.T.A.L.K.E.R.2:切尔诺贝利和倒下的叶子的心脏,但希望我们将获得整个平台的一些示例 。我很想在演示之外看到技术在行动中。