COMPUTEX2023 | NVIDIA ACE 游戏开发版利用生成式 AI 使虚拟角色栩栩如生

全新代工服务为云端及 PC 的游戏角色产生出定制化生成式AI模型

COMPUTEX—2023 年 5 月 29 日—NVIDIA 宣布推出全新定制 AI 模型代工服务 NVIDIA ACE 游戏开发版 (NVIDIA Avatar Cloud Engine (ACE) for Games)，利用 AI 驱动的自然语言交互技术，为游戏中的非玩家角色（NPC）带来智能，从而改变游戏体验。

中间件、工具及游戏开发者可以使用 “ACE 游戏开发版 (ACE for Games)” 在他们的游戏和应用中建立和部署定制的语音、对话及动画 AI 模型。

NVIDIA 开发者与性能技术部门副总裁 John Spitzer 表示：“生成式 AI 将彻底改变玩家与游戏人物之间的互动方式，并极大地提高游戏沉浸感。基于我们在 AI 领域的专业知识，加上几十年来与游戏开发者合作的经验，NVIDIA 正率先在游戏中使用生成式 AI。”

率先在游戏中使用生成式 AI

在 NVIDIA Omniverse 的基础上，“ACE 游戏开发版 (ACE for Games)”为语音、对话和角色动画提供优化的AI基础模型，包括：

• NVIDIA NeMo 大型语言模型（LLM）：使用专有数据构建、自定义和部署语言模型。根据游戏故事的世界观及人物背景来定制调整 LLM，并且通过NeMo Guardrails 来保护对话不会出现产生相反效果或不安全的内容。

• NVIDIA Riva：用于自动语音识别（ASR）及文本转语音，以启用实时语音对话。

• NVIDIA Omniverse Audio2Face：用于配合语音音轨，实时为游戏角色创建脸部表情动画。Audio2Face 搭配用于虚幻引擎 5 的 Omniverse Connector，开发者可以直接将脸部动画添加到 MetaHuman 的角色上。

开发者可以整合整套 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 解决方案，或是单独使用自己需要的组件。

“Kairos” 让人一窥未来游戏发展的样貌

NVIDIA 和参与 NVIDIA Inception 计划的初创公司 Convai 合作，展示游戏开发者如何在不久之后使用 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 来构建 NPC。Convai 将 ACE 模块与他们的端到端实时虚拟人平台相集成，旨在为虚拟游戏开发尖端的对话式 AI。

在名为 Kairos 的演示中，玩家与拉面店老板 Jin 进行互动。Jin 虽然只是一个 NPC，却能在生成式 AI 的帮助下配合叙事背景，逼真回答自然语言的问题。欢迎观看这个由 Unreal Engine 5 使用最新光线追踪功能和 NVIDIA DLSS 渲染出的演示内容。

Convai 创始人兼首席执行官 Purnendu Mukherjee 表示：“Convai 通过使用 ‘NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)’，让我们的工具可以达到所需的延迟和绝佳要求，这样每个开发者便能以低成本的方式使用 AI 打造 NPC。

在本地或云部署 NVIDIA ACE 游戏模型

支持 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)” 的神经网络针对多项功能进行优化，在规模、性能和质量方面进行各种取舍。“ACE 游戏开发版 (ACE for Games)” 代工服务将协助开发者微调游戏模型，然后通过 NVIDIA DGX Cloud，GeForce RTX PC 或现场加以部署，以实时进行推理。

游戏中沉浸式互动性的交互对延迟有着极为严苛的要求，因此这些模型的延迟性能均调整到最佳状态。

生成式 AI 将改变游戏体验

游戏开发者与初创公司已在其工作流上使用 NVIDIA 生成式 AI 技术。

1. 欧洲知名游戏开发者之一的 GSC Game World，将在即将推出的《潜行者 2：切尔诺贝利之心》（S.T.A.L.K.E.R. 2：Heart of Chornobyl）中采用 Audio2Face。

2. 独立游戏开发者 Fallen Leaf 用 Audio2Face 来制作《索利斯堡》（FORT SOLIS）中角色的脸部动画，《索利斯堡》（FORT SOLIS）是一款以火星为背景的第三人称科幻惊悚动作游戏。

3. 使用 AI 来制作虚拟角色的 Charisma.ai，通过 Audio2Face 来制作对话引擎中的动画。

欢迎了解更多使用 NVIDIA ACE 在 NVIDIA Omniverse 上构建的内容，以及 COMPUTEX 其他最新技术发展。