NVIDIA 不断重新定义 PC 游戏的边界。从引入实时光线追踪,到开创基于 AI 的图形技术——包括 DLSS 超分辨率、帧生成和光线重建,我们的 RTX 技术已经彻底改变了游戏的渲染方式和玩家的体验。
现在,我们发布 DLSS 5,推出了 3D 引导神经网络渲染,该技术是 AI 实时图形渲染领域的重大突破,可将游戏画面的真实度提升至前所未有的好莱坞照片级真实感。
观看 NVIDIA 应用深度学习研究总监 Edward Liu 和内容技术总监 Gabriele Leone 带来的讲解视频:如何使用 DLSS 3D 引导神经网络渲染及其美术设计控制功能
从北京时间 9 月 4 日中午 12:00 开始,由 Visual Concepts 开发和 2K 发行的 NBA 2K27 将支持 DLSS 5,支持所有 GeForce RTX 50 系列 GPU 和笔记本电脑。这标志着游戏美术设计师首次使用这项技术来提升画面保真度,从而将他们的创意构想化为现实。
“这项技术最出色之处在于它为我们带来了高自由度的控制功能。我们可以设定整体基调和风格,使其符合现有的美术方向;随后,还能在最关键的部分做到真正精准,利用逐像素增强控制遮罩来微调角色的细节。因为我们希望以最谨慎的态度还原球员本人的样貌特征。” —— Visual Concepts 高级制作人 Peter Kavic
自 GeForce 首次亮相以来,NVIDIA 一直致力于提供强大的图形算力,帮助游戏开发者打造令人惊叹、逼真的游戏世界–让游戏中的光照、反射和阴影都遵循真实世界的物理规律。
从 2001 年 GeForce 3 支持可编程着色器,到 2006 年 GeForce 8800 GTX 搭载 CUDA,2018 年 GeForce RTX 2080 Ti 带来实时光线追踪,再到 2025 年 GeForce RTX 5090 D v2 支持路径追踪和神经网络着色器,NVIDIA 不断推出重大架构创新,并实现了 375,000 倍的算力提升。
但好莱坞级别的真实感仍然遥不可及。一张逼真的好莱坞视觉特效帧可能需要数小时甚至数天才能渲染出一帧画面,而游戏开发者为了提供流畅的游戏体验,每秒必须输出 60 帧以上的画面。因此,为达到实时运行的性能目标,游戏开发者往往不得不在最终呈现效果上作出妥协,那些赋予场景生机的丰富细节往往被牺牲:单根发丝被简化的几何体所取代,而皮肤等复杂的多层材质则失去了其自然的深度。
与其采用传统渲染每一帧或为场景添加更多细节,一种实现写真级效果的替代方案应运而生:生成式 AI。
生成式模型通过学习真实世界中复杂的光照规律,能够生成传统渲染难以实现的照片级光照效果,例如发丝在背光环境下的光泽,或是光线穿透人体皮肤等复杂多层材质时产生的自然散射效果。
但传统生成式模型庞大、运行缓慢且具有概率性:如果向模型提供十次相同的提示,它会输出十种不同的结果。这种不可预测性适合离线图像创作,创作者可以从中挑选最满意的成品;然而交互式游戏则要求像素完全一致、角色形象固定不变,画面帧与帧之间必须随着玩家操作保持稳定。这种随机性并不适用于游戏场景,角色面部、游戏环境绝不能在毫秒内发生随机变化。
NVIDIA DLSS 于 2018 年首次发布,成为借助 AI 提升性能的行业标准,最初采用超分辨率,然后是帧生成和多帧生成。如今的全套 DLSS 4.5 技术可以让屏幕上每 24 个像素中有 23 个由 AI 生成。
如今,DLSS 不再局限于提供性能提升,更能够进一步革新画面保真度。之前的 DLSS 技术侧重于重建已有场景数据,输出更高分辨率画面、额外帧或是优化光线追踪光照效果。搭载 3D 引导神经网络渲染的 DLSS 5 则迈出全新一步:借助 AI 还原受性能限制而被迫删减的丰富光照与材质细节,帮助开发者实现最初的艺术构想。
3D 引导神经网络渲染它不依赖提示词,而是以渲染帧为基础——这些几何体、纹理和光照缓冲区由美术设计师精心设计,再通过游戏引擎构建。生成技术则作用于视觉呈现的最后一环,为场景提供逼真的光照和材质效果的同时,确保引擎渲染帧锁定了必须保留的内容,而美术设计师则决定哪些部分可以进行调整。
DLSS 5 以单帧画面的色彩信息与运动矢量作为输入,可输出具备真实质感的光照与材质效果,且这些效果具备确定性、时间稳定性,并与游戏内容紧密关联。
为了实现 DLSS 5,我们专门设计了一款全新实时 AI 模型,该模型解决了三个根本性挑战:保留艺术创作意图、保证时间稳定性以及实现毫秒级的执行速度。
首先,DLSS 5 旨在以确定性方式运行,在处理相同的输入帧时,能提供一致的输出结果。该模型以美术设计师和游戏引擎生成的原始帧为基础,对屏幕上的物体、材质、空间关系和光源进行分析。该模型通过训练以能够识别颜色、表面反照率、精细光照和表面法线等引擎数据,从而直接锚定到渲染帧。
DLSS 5 可识别物体、材质和光源等对象级场景语义
因此,DLSS 5 能为场景赋予极具真实感的材质交互效果,在全局光照的基础上,新增了自然的皮肤次表面散射效果、发丝与植被的真实透射效果,以及层次更丰富的接触阴影。
其次,DLSS 5 实现了实时逐帧级时间稳定性。不同于基于批量帧序列运行的视频生成模型,DLSS 5 采用严格的单帧输入、单帧输出的运行模式。通过利用游戏引擎提供的运动矢量,DLSS 5 可逐帧输入、逐帧输出,同时确保输出画面稳定且一致,不会出现闪烁、画面抖动或漂移现象。
第三,我们专门设计了一款快速、专用的 AI 模型,专为实时 3D 渲染管线量身打造。这个紧凑的网络可直接解析渲染帧中的引擎数据,并利用 GeForce RTX 50 系列 GPU 强大的 Tensor Core,实时渲染复杂的光照和材质。它可在单张 GPU 上本地运行,即使在高达 4K 的分辨率下也能保持流畅帧率。
对于开发者而言,集成过程非常简单,只需利用已广泛应用于整个 DLSS 技术套件的 NVIDIA Streamline 框架,以及适用于虚幻引擎游戏的虚幻引擎 5 插件即可。DLSS 5 是一项可选且独立的功能,让游戏工作室能够根据实际需求,灵活地将其与超分辨率、多帧生成和光线重建等功能搭配使用。
通过与传统的光栅化、光线追踪和路径追踪协同工作,DLSS 5 标志着一个新时代的开始——传统游戏渲染与实时神经网络图形技术相结合,为游戏画面实现电影级画质。
让画面更具真实感本质上是一项创意决策,这正是 DLSS 5 将美术指导工具直接交付给开发者的核心原因。DLSS 5 能帮助开发团队突破实时算力与显存容量的传统限制,实现原本无法通过建模和渲染实现的照片级细节效果;同时它还提供了多套不同的模型与控制选项,支持开发者从美术层面自定义效果的应用方式与生效范围。对普通玩家而言,该功能仅为一个简单的开关切换按钮。
我们首先来看看 DLSS 5 是如何完整保留美术创作意图的:在这个拉面师傅的演示案例中,启用 DLSS 5 后,他的体型和面部轮廓保持不变。发生变化的只是视觉线索和光照反应。在头部和布料周围,环境光遮蔽效果更加鲜明,接触阴影更为紧凑。当光线穿过耳朵时,会产生更自然的次表面散射效果;而眼睛则呈现出更清晰的反射。这些新增细节并不会将拉面师傅变成一个与原作无关的形象,而是让原有的角色、材质与光照效果更加完整、自然,大幅提升了角色和场景的质感。
单击此处加载全屏 4K 对比图
通过 DLSS 5 SDK,开发者可以从多个模型中进行选择,这些模型具有不同的参数权重,可产生不同的输出结果,从而使他们能够选择最适合自己游戏的模型。
这种模型选择可以应用于整个游戏,也可以混合搭配不同场景中的模型。例如,美术设计师可以为密集的户外植被选择一个模型,为引人注目的室内场景选择另一个模型。他们还可以混合搭配不同的游戏和过场动画模型,以符合其艺术构想。
DLSS 5 还提供“结构强度”与“色调强度”两项调节选项:“结构强度”可调节画面中的高频细节,例如环境光遮蔽、接触阴影、反射和次表面散射。这项控制功能为开发者提供了一个强有力的工具,可大幅提升游戏画面的真实感。
“色调强度”则用于控制低频细节,例如更大范围的光照与色彩响应,这类调整通常更具艺术表现力。开发者将该参数设为0时,可完全保留渲染帧的原始色彩;调高参数后,则可基于场景特性完成针对性的色调调整。结构强度与色调强度两项控制相互配合,能让美术团队能够决定最终画面的增强程度。
单击此处加载全屏 4K 对比图
为确保画面增强效果仅作用于预设目标区域,DLSS 5 搭载了语义 AI 遮罩功能,可自动识别场景内的各类对象,支持开发者有针对性地提升环境场景的增强幅度,同时不对角色生效,反之亦可按需调整。
此外,引擎级遮罩功能支持美术设计师单独将特定道具或资源组 (例如玻璃器皿、水滴或植被) 进行隔离,对游戏内的特定元素应用自定义神经网络光照调整,且完全不会影响周围其他元素。
神经网络渲染的结果始终基于引擎的基础帧,这意味着最终画面的输出质量与输入的保真度成正比。
DLSS 5 能显著提升传统光栅化画面的表现,而如果为模型提供光线追踪、路径追踪光照这类更丰富的源数据,则能获得精准度大幅提升的输出效果。换句话说,游戏提供的原有基础越扎实,DLSS 5 最终输出的效果就越好。
单击此处加载全屏 4K 对比图
我们正与各大游戏工作室紧密协作,开发者的反馈将持续直接影响着我们如何优化技术,并扩展我们的模型和控制功能。
25 多年来,Visual Concepts 开发的 NBA 2K 系列一直是游戏领域中最具真实感的竞技体育游戏。团队致力于让游戏内的体验尽可能接近观看真实的 NBA 或 WNBA 直播的感受。
通过与 Visual Concepts 和 2K 的深度合作,我们为 NBA 2K27 带来 DLSS 5 3D 引导神经网络渲染技术,为玩家带来真实感达到全新高度的游戏体验。
NBA 2K27 将于北京时间 9 月 4 日中午 12 点支持 DLSS 5,并适用于所有 GeForce RTX 50 系列 PC 和笔记本电脑玩家。
Visual Concepts 借助 DLSS 5 对 NBA 2K27 进行画面增强与调整,进一步提升游戏的真实感。借助 DLSS 5,玩家可以看到光线自然地穿过球员的耳朵、皮肤的自然光照表现,以及头发随着光影变化呈现出的细节,同时还能完整保留球员本人的面部特征。
“DLSS 的 3D 引导神经网络渲染有效提升了材质与光照的视觉效果,让整个游戏的真实感实现了质的飞跃。”—— Visual Concepts 高级制作人 Peter Kavic
开启 DLSS 5 后,全明星后卫凯德・坎宁安的形象得到了显著提升:优化后的皮肤次表面散射效果在球场灯光下呈现出逼真的暖调质感;更精细的接触阴影突显了其颈部和球衣领口处的细节;同时自然的透光效果大幅提升了头发的细节清晰度,从而提升了整体的真实感。
点击此处,查看凯德・坎宁安在 DLSS 3D 引导神经网络渲染效果下的全屏 4K 画面对比
DLSS 5 还进一步提升了全明星控球后卫泰里斯·哈利伯顿的画面保真度:次表面散射效果让他的面部在球场灯光呈现出极具真实感的暖调质感,同时在他的鼻子下方与下巴处生成精准的接触阴影;而经过优化的环境光遮蔽效果,也为他的护臂的褶皱处增添了清晰的阴影轮廓。
点击此处,查看泰里斯·哈利伯顿在 DLSS 3D 引导神经网络渲染效果下的全屏 4K 画面对比
场边的观众与工作人员也获得了更丰富的光照与材质响应效果:包括自然的皮肤次表面散射和清晰的接触阴影,大幅提升了这些角色模型的图像质量。
单击此处加载全屏 4K 对比图
在 NBA 2K27 中启用全套 DLSS 技术,在 4K 分辨率下开启超高预设和光线追踪功能,GeForce RTX 5090 D v2 玩家开启 DLSS 5,最高可实现 370 帧/秒的流畅运行帧率,获得出色的游戏体验。
在 2560x1440 分辨率下,开启超高预设、光线追踪,并开启 DLSS 5 时,在 GeForce RTX 5080 上帧率最高可达到 410 FPS,在 GeForce RTX 5070 Ti 上帧率最高可达到 350 FPS,而在 GeForce RTX 5070 上帧率最高可达到 260 FPS。
在 1920x1080 分辨率下,几乎所有 GeForce RTX 50 系列玩家都可以结合使用超高预设和 DLSS 5,体验开启光线追踪的 NBA 2K27。
DLSS 5 与 3D 引导神经网络渲染、超分辨率和多帧生成相结合,可提供更高的帧率并显著改善图像质量。DLSS 5 为杰森・塔图姆带来了自然的皮肤次表面散射效果、精细的胡须光影,同时加深了球衣以及篮球表面的接触阴影,画面真实感得到了显著提升。
在 4K 分辨率并开启光线追踪时,在 GeForce RTX 5090 D v2 上,开启 DLSS 后可将帧率提升至 370 FPS
要在 NBA 2K27 中启用 DLSS 5,玩家需要下载新版 GeForce Game Ready 驱动,该驱动将于北京时间 9 月 4 日中午 12 点发布,并提供游戏中 DLSS 神经网络渲染选项:
自 3 月首次公布 DLSS 5 以来,项目研发进展十分迅速:该技术最初需要两块 GeForce RTX 5090 显卡才能运行,如今已可在单块显卡上运行,我们在短短六个月内就实现了 5 倍的性能提升,使 DLSS 5 能够适用于所有 GeForce RTX 50 系列显卡与笔记本电脑 GPU。这一成果得益于系统化的渲染管线优化以及神经网络模型的改进,从而实现了更快的运行速度和更出色的画质。
我们并未放缓优化进程,目前我们正在积极开发进一步的优化方案。预计今年秋季推出的模型更新,将在现有基础之上进一步提升性能。凭借十余年的 DLSS 专业技术积累,我们将继续致力于不断突破性能与画质的上线,而这仅仅是个开始。
DLSS 5 是 AI 与图形渲染领域的一项重大突破,将游戏画面真实感提升至全新高度:
DLSS 5 是对现有渲染管线的扩展而非替代。它在 DLSS 现有技术 (超分辨率、多帧生成、光线重建) 的基础之上,在整个图形渲染体系中无缝运行,同时优化光栅化、光线追踪以及路径追踪等传统渲染方式。这些创新开启了一个变革性的全新时代,融合了需要人工调校的传统渲染与神经网络图形技术,在大幅提升画面真实感的同时,保留美术设计师进行创意表达时的控制权。
若想要在 NBA 2K27 中体验 DLSS 5,你可以购买游戏,并于北京时间 9 月 4 日中午 12 点,通过 NVIDIA App 下载新版 GeForce Game Ready 驱动。请持续关注 GeForce.cn,未来数周及数月内,还将有更多支持 DLSS 5 的游戏陆续公布。