NVIDIA 数字人技术让 AI 角色栩栩如生

在 GDC 2024 和 GTC 2024 上，我们宣布与领先的 AI 开发者正使用生成式 AI 为客户服务和动态游戏角色创建栩栩如生的化身。

NVIDIA 数字人技术套件包括用于语音和动画的 NVIDIA ACE、用于语言功能的 NVIDIA NeMo 以及用于光线追踪渲染的 NVIDIA RTX，是开发者创建能进行 AI 驱动的自然语言交互的数字人的基石，使对话更逼真和引人入胜。

在 GDC 和 GTC 上，开发者们公布了一系列全新数字人技术 Demo，采用了多项 NVIDIA AI 技术和 NVIDIA ACE 微服务。

敬请继续阅读，了解 Frost Giant Studios、Hippocratic AI、Inworld AI、完美世界游戏、RealityArts Studio 和 UneeQ 如何在其游戏、平台和应用中利用 NVIDIA ACE、NVIDIA NeMo 和 NVIDIA RTX 技术。

Inworld AI 和 NVIDIA 合作开发的全新 Covert Protocol 技术 Demo

NVIDIA ACE 技术通过我们的平台合作伙伴 (例如 Inworld AI) 提供给游戏开发者使用，并呈现给游戏玩家进行体验。Inworld 的 AI 引擎为开发者提供了一个基础平台，他们可以利用该平台在游戏中构建数字人和角色。

在 GDC 2024 上，Inworld 和 NVIDIA 联合公布了一项全新技术 Demo- Covert Protocol，用于展示 NVIDIA ACE 技术和 Inworld 的 AI 引擎。Covert Protocol 旨在展示通过生成式 AI 可以实现的各种全新类型的游戏体验。在这个技术 Demo 中，您将扮演一名私家侦探，根据与场景中角色的对话结果来完成目标。

Covert Protocol 包括两项集成到 Inworld 角色引擎中的 ACE 技术：NVIDIA Riva 自动语音识别和 NVIDIA Audio2Face。Covert Protocol 基于虚幻引擎 5 开发，利用 Inworld 的虚幻引擎插件，可以更快速简单地使用虚幻引擎 MetaHuman。

Inworld AI 公司首席执行官Kylan Gibbs表示：“情感会影响我们的想法、行为和社会关系。NVIDIA ACE 微服务与 Inworld AI 引擎的结合使开发者能创建可以推动动态叙事的数字化身，为玩家解密、推理和玩游戏开辟全新可能性。”

为了加快开发者采用这些技术的步伐，Inworld AI 将在不久后发布 Covert Protocol 的源代码，以便开发者能够从该技术 Demo 中学习如何利用它来打造自己的新作品。

育碧 NEO NPCs 利用 Inworld 和 NVIDIA ACE 技术探索数字人在游戏中可能性

育碧正探索与数字NPC的新型互动玩法，随着生成式 AI 技术的出现，这一领域正发生革命性变革。"NEO NPCs"是育碧最新研发项目的成果。这款先进的 NPC 功能，可与玩家、环境或其他角色实时互动，为动态和突发故事开辟全新可能性。

育碧通过三个独立技术 Demo 展示了 NEO NPC 的功能。每个场景都侧重于 NPC 行为、环境和上下文意识的不同方面；一系列实时反应和动画；以及连续对话、协作和战略决策。这些实验发现突破了游戏设计和沉浸感的界限。

通过 NEO NPCs，育碧的叙事和动画设计师将游戏脚本元素与玩家自发的互动融为一体，将游戏开发的未来推向全新境界。

育碧的叙事团队利用 Inworld AI 技术打造出两个 NEO NPCs：Bloom 和 Iron，他们拥有自己的背景故事、知识库和不同的对话风格，在技术 Demo 宇宙中建立独特的角色。

Inworld 技术还为 NEO NPC 提供有关周围环境的内在知识，并通过 Inworld 的 LLM 提供交互式响应。他们的声音是利用 ElevenLabs 的 AI 语音生成系统合成的，该系统集成了 NVIDIA Audio2Face，以便实时为两个 NPC 的面部提供实时面部表情和口型同步。

“诛仙世界 (World of Jade Dynasty)”和“浑噩 (Unawake)”也在开发流程中采用了 Audio2Face

完美世界游戏开发的“诛仙世界 (World of Jade Dynasty)”是一款即将推出的以虚幻引擎 5 开发的大型多人在线角色扮演游戏，是基于广受欢迎的“诛仙 (Jade Dynasty)”IP的游戏创作。

我们在游戏中实录的一段新视频展示了离线渲染的 NVIDIA Audio2Face 技术，该技术可生成准确的中文和英文口型同步，使游戏脚本作者能够轻松地向“诛仙世界 (World of Jade Dynasty)”添加新的语音内容。利用 Audio2Face 可以轻松支持该游戏的多语言版本。

RealityArts Studio 和 Toplitz Productions 推出的“浑噩 (Unawake)”基于虚幻引擎 5 开发。在这款游戏中，来自天堂和地狱的噩梦生物将展开残酷的战争，您将在这些混乱的战争中决定人类的命运。在这款动作冒险游戏中，您与对手进行激烈的第一人称近战交战时，将给予他们惩罚或赦免。您将成为最后的堡垒。

“浑噩 (Unawake)”利用 Audio2Face 在游戏实机游玩期间和高保真过场动画期间创建角色的面部动画。敬请观看下面新发布的“浑噩 (Unawake)”视频，了解 Audio2Face 的实际应用；该游戏将于今年晚些时候发布，并将支持带有帧生成功能的 DLSS 3，敬请关注。

NVIDIA ACE 技术：借助 Hippocratic AI 和 UneeQ 构建数字人和虚拟助手的模块

为了展示  NVIDIA  数字人技术的全新功能，我们与 Hippocratic AI 和 UneeQ 等行业领先开发者合作，针对游戏以外的领域展示了一系列全新技术 Demo。

Hippocratic AI 已打造一个以安全为重点、由 LLM 驱动、针对特定任务的医疗代理 demo，并与 27 个卫生系统进行合作。该代理可给患者打电话、跟进护理协调任务、提供术前指导、执行出院后管理等。NVIDIA 与 Hippocratic AI 合作扩展其解决方案，使用 NVIDIA ACE 微服务、NVIDIA Audio2Face 以及 NVIDIA Animation graph 和 NVIDIA Omniverse Streamer Client 来展示生成式 AI 医疗数字人代理的潜力。

Hippocratic AI 联合创始人兼首席执行官 Munjal Shah 表示：“我们的数字助理为全球患者提供有所帮助、及时和准确的信息。NVIDIA ACE 技术通过前沿的视觉效果和逼真的动画，让医疗助理栩栩如生，有助于我们更好地与患者沟通。” 

UneeQ 是一个自主数字人平台，专门为客户服务和互动应用创建 AI 驱动的化身。它的数字人在线代表品牌与客户实时沟通，增强客户购买信心。UneeQ 将 NVIDIA Audio2Face 微服务集成到其平台中，并将其与 Synanim ML 相结合，以创建高度逼真的数字人，从而获得更好的客户体验和参与度。 

UneeQ 公司创始人兼首席执行官 Danny Tomsett 表示：“UneeQ 公司将 NVIDIA 动画 AI 与我们自己的 Synanim ML 合成动画技术相结合，使数字人支持实时人机交互，这种人机交互具有情感响应能力，能提供由对话式 AI 驱动的动态体验。” 

NVIDIA 处于生成式 AI 的发展前沿，采用 NVIDIA ACE 技术的开发者和平台包括 Convai、Cyber Agent、Data Monsters、Deloitte、HippocraticAI、IGOODI、Inworld AI、Media.Monks、米哈游、网易游戏、完美世界游戏、Openstream、掌趣科技、Quantiphi、Rakuten Securities、Slalom、SoftServe、腾讯、Top Health Tech、Ubisoft、UneeQ 和 Unions Avatars。欢迎前往他们的网站，了解他们如何利用数字人技术来创造新的可能并增强客户体验。

NVIDIA AI 技术让角色栩栩如生

生成式 AI 技术将彻底改变游戏，让数字人和游戏角色不再局限于预先录制的脚本，而是能进行更有意义的互动。您与这些角色的对话可以影响游戏的结果，改变您与这些角色的关系，并最终生成新的游戏类型。不妨详细了解一下 NVIDIA ACE 的未来发展和抢先体验计划。您也可以前往 GeForce.cn，探索 NVIDIA RTX 技术和 GeForce RTX GPU 在最新游戏中的更多应用。