“NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)”:生成式 AI 让非玩家角色更加生动逼真

想象一下,您可以在游戏中全程用母语和非玩家角色 (NPC) 进行智能、无预设脚本的动态对话,这些角色有自己的个性,而其表情和语气会进化的恰到好处。

生成式 AI 技术正在让这一切成为现实,在 2023 年 COMPUTEX 展会上,我们发布了 "NVIDIA Avatar Cloud Engine (ACE) 游戏开发版 [NVIDIA Avatar Cloud Engine (ACE) for Games]",开启未来游戏 NPC 的新篇章。“NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)"是一项全新定制化 AI 模型平台技术,可通过 AI 助力的自然语言交互,实现非玩家角色 (NPC) 智能化,从而为游戏行业带来变革。

NVIDIA 开发者和性能技术部门副总裁 John Spitzer 表示:“生成式 AI 有可能彻底转变玩家与游戏角色的互动方式,显著提升玩家在游戏中的沉浸感。NVIDIA 凭借其在 AI 领域的专业知识以及与游戏开发者数十年的合作经验,正率先在游戏中采用生成式 AI。”

“NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)":AI 基础模型

中间件、工具和游戏开发者可以利用 NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games),在云端和 PC 上的软件和游戏中搭建和部署定制的语音、对话和动画 AI 模型。

优化的 AI 基础模型包括:

  • NVIDIA NeMo,可提供基础语言模型和模型定制工具,以便开发者进一步针对游戏角色调整模型。这种可定制的 LLM 可以让开发者对角色进行与游戏环境契合的背景故事和个性。开发者可以利用 NeMo Guardrails 为 NPC 设置可编程规则,确保玩家的互动始终都在场景上下文中进行。
  • NVIDIA Riva,可提供自动语音识别 (ASR) 和文本转语音 (TTS) 功能,可帮助 NVIDIA NeMo 实现实时语音对话。
  • NVIDIA Omniverse Audio2Face,能够仅通过一个音频源即时为游戏角色创作富有表现力的面部动画。Audio2Face 支持用于 UE 5 的 Omniverse 连接器,因此开发者可以直接向 MetaHuman 角色添加面部动画。

“NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)":工作原理

为展示 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)"的强大功能,并预览开发者在不久的将来如何构建 NPC,我们与加入 NVIDIA 初创加速计划的初创公司 Convai 合作搭建了一个用于在游戏和虚拟世界中创建和部署 AI 角色的平台,以帮助优化 ACE 模组并将模组集成到该平台中。

抢先观看令人惊叹的 NVIDIA KAIROS demo:

 

Convai 创始人兼首席执行官 Purnedu Mukherjee 表示:“借助 “NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)",Convai 的工具可以达到相应延迟和质量要求,让每位开发者都能以经济高效的方式制作 AI NPC。

NVIDIA KAIROS demo 利用 NVIDIA Riva 完成语音转文本和文本转语音功能,利用 NVIDIA NeMo 为其对话式 AI 提供支持,并利用 Audio2Face,在 AI 助力下通过语音驱动面部动画。这些模组无缝集成到 Convai 服务平台中,并馈送到 UE 5 和 MetaHuman 中,从而让 Jin 变得栩栩如生。

Jin 和他的拉面店场景由 NVIDIA Lightspeed Studios 艺术团队创作,并完全在 UE 5 中进行渲染。该团队利用 NVIDIA RTX 直接照明 (RTXDI) 技术实现了光线追踪光照和阴影效果,同时利用 DLSS 技术实现了超高的帧率和画质。

此实时演示展示了当前利用 GeForce RTX 显卡、NVIDIA RTX 技术和“NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)"可能达到的画质,同时列举了哪些即将推出的游戏可能会利用这一颠覆性技术。

NVIDIA ACE:让 NPC 更加生动逼真

游戏开发者和初创公司已经在使用 NVIDIA 生成式 AI 技术。例如,GSC Game World 在备受期待的“潜行者 2:切尔诺贝利之心 ( S.T.A.L.K.E.R. 2 Heart of Chornobyl)”中使用了 Audio2Face。独立游戏开发者 Fallen Leaf 在以火星为背景的第三人称科幻惊悚类游戏“索利斯堡 (Fort Solis)”中利用 Audio2Face 制作角色的面部动画。此外,通过 AI 实现虚拟角色的公司 Charisma.ai 则利用 Audio2Face 为其对话引擎提供动画支持。

如需了解有关生成式 AI 技术的更多信息,请前往我们的 NVIDIA 开发者博客订阅以详细了解“NVIDIA ACE 游戏开发版 (NVIDIA ACE for Games)"、未来更新和抢先体验计划。如需了解 NVIDIA RTX 技术和 GeForce RTX GPU 在最新游戏中的详细使用情况,请前往 GeForce.cn