称英伟达的 DLSS 5 为“人工智能垃圾”完全误解了现代渲染的意义
又是一天,又一个 DLSS 版本在玩家群体中引发不和。这让我回想起 DLSS 首个公开版本发布时的情景,以及随之而来的各种负面声音。然而,如今,除了少数声音很大的少数玩家外,几乎所有玩家都否认 DLSS 曾是这一代的杀手级功能。
DLSS 使用机器学习算法智能地对渲染图像进行超分辨率处理,使其看起来像是更高分辨率的图像。这解决了一个由于从 CRT 显示器(可以显示任意分辨率而不会出现缩放伪影)转向平板显示器(具有物理像素网格)而产生的主要问题。如果你无法以“原生”分辨率渲染图像,就需要应用缩放解决方案,而在 DLSS 出现之前,这些解决方案看起来都相当糟糕。
随着 DLSS 的成熟,它达到了提供比结合流行的时间抗锯齿(TAA)技术的“原生”渲染更出色的图像质量的程度。在 DLSS 4.5 中,NVIDIA 对这项技术的最后粗糙之处进行了打磨,几乎解决了图像稳定性和消隐伪影的问题。这是一大飞跃,以至于人们想知道为什么它只是一个点五版本,但事实证明,答案比我们想象的要激进得多。
什么是 DLSS 5?
想象一个更好的(游戏)世界
DLSS 5 包含一项新技术,该技术使用 AI 重新处理游戏中的光照,使其在逼真度上实现重大飞跃。它不会改变几何或纹理工作,但会“想象”如果游戏以极高质量的光照渲染会是什么样子。你可以在下面的 NVIDIA 官方发布视频中看到实际示例。
最终的结果远远超出了当前硬件使用传统渲染方法所能实现的任何水平。它将这些实时游戏推向了预渲染CG的领域。在Digital Foundry的这段初步分析视频中,你可以看到这是在真实游戏中的真实实现。结果是一致的,游戏照常运行,只是看起来不同。
就像实时光线追踪技术一样,这是利用神经网络来实现目前单靠蛮力根本无法做到的事情。
现在,值得注意的是,这个演示使用的不仅是一张,而是两张RTX 5090显卡。一张用来运行游戏,另一张用来对图像应用DLSS处理,但显然,这项技术的目标是在公开发布时能够在单张显卡上运行。
为什么玩家在抱怨?
新事物令人害怕
对 DLSS 5 的在线反应可以说是颇为有趣。最直言不讳的反应是负面的。正如你所预料的,“AI 糊弄”这个词被相当随意地使用。然而,这里的关键主题是“艺术意图”。DLSS 5 改变了游戏的艺术表现,使其不再像游戏开发者原本希望的那样呈现。
我无法否认这确实让游戏看起来有所不同,但暗示 NVIDIA 只是未经许可或批准就使用大型工作室的游戏发布了一些演示,这是可笑的。事实上,不仅像 Bethesda 和 Capcom 这样的工作室给予了支持,他们还亲自参与了自己游戏中 DLSS 5 的实现!
NVIDIA 还迅速在公告视频下的置顶评论中指出,DLSS 5 不是“滤镜”或某种开关式魔法:
需要注意的是,随着这项技术的进步——游戏开发者可以完全、详细地控制 DLSS 5 的效果,以确保他们保持游戏独特的美学。SDK 包括强度、色彩分级以及屏蔽不应应用效果的区域等功能。它不是一个滤镜——DLSS 5 将每一帧游戏的颜色和运动向量输入模型,使输出锚定在源 3D 内容上。
它本质上是建立在我们在 RTX 的光线重建和原始去噪过程中所看到的基础上。它为游戏中的光照提供了另一种选择。
我看到的另一个抱怨是针对像 Midjourney 这样的生成式 AI 产品的,认为其训练是基于被盗作品。然而,NVIDIA 的 DLSS 是基于他们自己生成的极高质量的实时游戏画面进行训练的。使 DLSS 成为现在这个样子的,是 NVIDIA 的超级计算机资源,而不是我们购买的带有简单张量核心以运行生成算法的 GPU。
结果比方法更重要
这都是假的,伙计们
撇开所有这些对预判的混乱不谈,我最大的挫败感来自于电子游戏圈里一些人对AI使用方式表现出的奇怪纯粹主义。所谓的“假帧”和“假像素”阵营曾在DLSS最初阶段猛烈抨击它。他们显然只想要像自然本意一样的原始本地像素。
这种整个框架忽略了一个事实,即他们所捍卫的“真正”游戏渲染技术实际上是游戏开发者多年来发明的一堆权宜之计和捷径,以尽可能接近他们的意图。屏幕上图像是由什么样的数学或哪种类型的处理器生成的,有什么关系呢?
像我这样的电脑狂可能会对技术细节感兴趣,当然。但作为一个玩家,我最关心的是结果。它看起来好吗?玩起来顺畅吗?这些都是重要的问题。我确实关心自己是否得到预期的体验。毕竟,我是那种会买 CRT 显示器和电视的人,这样我就能看到游戏在那些显示器上应该呈现的样子。
我认为,也许使用现有游戏来展示DLSS 5可能是NVIDIA方面的一个错误。可能更好的是展示一款从零开始设计、将DLSS 5作为其渲染解决方案一部分的游戏。
无论哪种方式,这是一个实现视觉保真度跨代跃升的聪明方案。唯一的问题是,大多数人使用的搭载 AMD 的游戏主机是否会在发布时再次显得过时,就像 NVIDIA 在 PlayStation 5 和 Xbox 系列主机发布时,同时以 RTX 和 DLSS 让 AMD 措手不及时一样。
