在 GDC 2024 和 GTC 2024 上，我们宣布与领先的 AI 开发者正使用生成式 AI 为客户服务和动态游戏角色创建栩栩如生的化身。
NVIDIA 数字人技术套件包括用于语音和动画的 NVIDIA ACE、用于语言功能的 NVIDIA NeMo 以及用于光线追踪渲染的 NVIDIA RTX，是开发者创建能进行 AI 驱动的自然语言交互的数字人的基石，使对话更逼真和引人入胜。
在 GDC 和 GTC 上，开发者们公布了一系列全新数字人技术 Demo，采用了多项 NVIDIA AI 技术和 NVIDIA ACE 微服务。
敬请继续阅读，了解 Frost Giant Studios、Hippocratic AI、Inworld AI、完美世界游戏、RealityArts Studio 和 UneeQ 如何在其游戏、平台和应用中利用 NVIDIA ACE、NVIDIA NeMo 和 NVIDIA RTX 技术。
Inworld AI 和 NVIDIA 合作开发的全新 Covert Protocol 技术 Demo
NVIDIA ACE 技术通过我们的平台合作伙伴 (例如 Inworld AI) 提供给游戏开发者使用，并呈现给游戏玩家进行体验。Inworld 的 AI 引擎为开发者提供了一个基础平台，他们可以利用该平台在游戏中构建数字人和角色。
在 GDC 2024 上，Inworld 和 NVIDIA 联合公布了一项全新技术 Demo- Covert Protocol，用于展示 NVIDIA ACE 技术和 Inworld 的 AI 引擎。Covert Protocol 旨在展示通过生成式 AI 可以实现的各种全新类型的游戏体验。在这个技术 Demo 中，您将扮演一名私家侦探，根据与场景中角色的对话结果来完成目标。
Covert Protocol 包括两项集成到 Inworld 角色引擎中的 ACE 技术：NVIDIA Riva 自动语音识别和 NVIDIA Audio2Face。Covert Protocol 基于虚幻引擎 5 开发，利用 Inworld 的虚幻引擎插件，可以更快速简单地使用虚幻引擎 MetaHuman。
Inworld AI 公司首席执行官Kylan Gibbs表示：“情感会影响我们的想法、行为和社会关系。NVIDIA ACE 微服务与 Inworld AI 引擎的结合使开发者能创建可以推动动态叙事的数字化身，为玩家解密、推理和玩游戏开辟全新可能性。”
为了加快开发者采用这些技术的步伐，Inworld AI 将在不久后发布 Covert Protocol 的源代码，以便开发者能够从该技术 Demo 中学习如何利用它来打造自己的新作品。
Ubisoft’s NEO NPCs Explores the Possibilities of Digital Humans in Games with Inworld AI & NVIDIA ACE Technologies
Ubisoft is exploring new types of interactive gameplay with dynamic Non Player Characters (NPCs), a field that is being revolutionized with the emergence of generative AI technologies. “NEO NPCs” the product of their latest research and development project are advanced NPCs designed to interact in real time with players, their environment and other characters, opening up new possibilities for dynamic and emergent storytelling.
Ubisoft showcased the capabilities of these NEO NPCs through three separate demo scenarios. Each scenario focuses on different aspects of NPC behaviors, environmental and contextual awareness; a spectrum of real-time reactions and animations; as well as conversation memory, collaboration and strategic decision-making. Combined, these discoveries through the experiment pushes the boundaries of game design and immersion.
With NEO NPCs, Ubisoft’s narrative and animation designers blended the reliability of scripted game elements with the dynamism of spontaneous player interactions, nudging the future of game development towards new horizons.
Leveraging Inworld AI technology, Ubisoft’s narrative team created two NEO NPCs, Bloom and Iron, who have their own background story, knowledge base, and different conversational styles to establish these unique characters in the demo universe.
Inworld technology also provides the NEO NPCs with intrinsic knowledge of their surroundings, as well as interactive responses courtesy of Inworld’s LLM. NVIDIA Audio2Face provides facial animations and lip synching for the two NPCs’ faces in real-time.
“诛仙世界 (World of Jade Dynasty)”和“浑噩 (Unawake)”也在开发流程中采用了 Audio2Face
完美世界游戏开发的“诛仙世界 (World of Jade Dynasty)”是一款即将推出的以虚幻引擎 5 开发的大型多人在线角色扮演游戏，是基于广受欢迎的“诛仙 (Jade Dynasty)”IP的游戏创作。
我们在游戏中实录的一段新视频展示了离线渲染的 NVIDIA Audio2Face 技术，该技术可生成准确的中文和英文口型同步，使游戏脚本作者能够轻松地向“诛仙世界 (World of Jade Dynasty)”添加新的语音内容。利用 Audio2Face 可以轻松支持该游戏的多语言版本。
RealityArts Studio 和 Toplitz Productions 推出的“浑噩 (Unawake)”基于虚幻引擎 5 开发。在这款游戏中，来自天堂和地狱的噩梦生物将展开残酷的战争，您将在这些混乱的战争中决定人类的命运。在这款动作冒险游戏中，您与对手进行激烈的第一人称近战交战时，将给予他们惩罚或赦免。您将成为最后的堡垒。
“浑噩 (Unawake)”利用 Audio2Face 在游戏实机游玩期间和高保真过场动画期间创建角色的面部动画。敬请观看下面新发布的“浑噩 (Unawake)”视频，了解 Audio2Face 的实际应用；该游戏将于今年晚些时候发布，并将支持带有帧生成功能的 DLSS 3，敬请关注。
NVIDIA ACE 技术：借助 Hippocratic AI 和 UneeQ 构建数字人和虚拟助手的模块
为了展示 NVIDIA 数字人技术的全新功能，我们与 Hippocratic AI 和 UneeQ 等行业领先开发者合作，针对游戏以外的领域展示了一系列全新技术 Demo。
Hippocratic AI 已打造一个以安全为重点、由 LLM 驱动、针对特定任务的医疗代理 demo，并与 27 个卫生系统进行合作。该代理可给患者打电话、跟进护理协调任务、提供术前指导、执行出院后管理等。NVIDIA 与 Hippocratic AI 合作扩展其解决方案，使用 NVIDIA ACE 微服务、NVIDIA Audio2Face 以及 NVIDIA Animation graph 和 NVIDIA Omniverse Streamer Client 来展示生成式 AI 医疗数字人代理的潜力。
Hippocratic AI 联合创始人兼首席执行官 Munjal Shah 表示：“我们的数字助理为全球患者提供有所帮助、及时和准确的信息。NVIDIA ACE 技术通过前沿的视觉效果和逼真的动画，让医疗助理栩栩如生，有助于我们更好地与患者沟通。”
UneeQ 是一个自主数字人平台，专门为客户服务和互动应用创建 AI 驱动的化身。它的数字人在线代表品牌与客户实时沟通，增强客户购买信心。UneeQ 将 NVIDIA Audio2Face 微服务集成到其平台中，并将其与 Synanim ML 相结合，以创建高度逼真的数字人，从而获得更好的客户体验和参与度。
UneeQ 公司创始人兼首席执行官 Danny Tomsett 表示：“UneeQ 公司将 NVIDIA 动画 AI 与我们自己的 Synanim ML 合成动画技术相结合，使数字人支持实时人机交互，这种人机交互具有情感响应能力，能提供由对话式 AI 驱动的动态体验。”
NVIDIA 处于生成式 AI 的发展前沿，采用 NVIDIA ACE 技术的开发者和平台包括 Convai、Cyber Agent、Data Monsters、Deloitte、HippocraticAI、IGOODI、Inworld AI、Media.Monks、米哈游、网易游戏、完美世界游戏、Openstream、掌趣科技、Quantiphi、Rakuten Securities、Slalom、SoftServe、腾讯、Top Health Tech、Ubisoft、UneeQ 和 Unions Avatars。欢迎前往他们的网站，了解他们如何利用数字人技术来创造新的可能并增强客户体验。
NVIDIA AI 技术让角色栩栩如生
生成式 AI 技术将彻底改变游戏，让数字人和游戏角色不再局限于预先录制的脚本，而是能进行更有意义的互动。您与这些角色的对话可以影响游戏的结果，改变您与这些角色的关系，并最终生成新的游戏类型。不妨详细了解一下 NVIDIA ACE 的未来发展和抢先体验计划。您也可以前往 GeForce.cn，探索 NVIDIA RTX 技术和 GeForce RTX GPU 在最新游戏中的更多应用。