它不远了,你知道的。那个承诺的、逼真的游戏世界。长期以来一直追寻的游戏图形圣杯。但这不会是由独立游戏开发者或未来游戏引擎背后的疯狂天才们创造的。不,就像我们即将迎来的未来的每一件事一样,它将由人工智能生成。
等等!在你因为提到AI生成的游戏未来而离开之前——我知道,我也对泛滥的生成式AI感到厌倦了——但实际上当谈到真正看起来有点真实的 game 时,这可能非常令人兴奋。注:game此处保留英文原词,因中文语境下难以找到完全对应的翻译。
如果你的算法和我的类似(真是奇怪的说法),那么你肯定在TikTok和YouTube上看到了很多AI生成的游戏视频,传统的游戏画面被捕获后通过视频到视频的生成器处理,最终输出了一些非常逼真却略显诡异的游戏视频。
但它们也非常令人惊叹,无论是从现在的外观还是对未来可能意味着什么来看。如果这种AI路径可以被集成到我们的游戏中作为某种最终的后处理滤镜,这是一件值得兴奋的事情。这里的例子显然不是实时AI滤镜——这才是真正的难点——它们只是使用现有的视频作为输入参考点来生成一个更逼真的版本。
但当你看看它在《半条命》、《红色死亡》和《侠盗猎车手》上的表现时,结果相当出色。
目前的情况是,内容创作者,如油管博主Soundtrick这些视频的制作者正在使用Runway ML上的Gen-3视频转视频工具处理现有的游戏画面。然后,该工具根据输入的视频生成自己的视频内容,人们将大量不同的游戏喂入AI系统,从而输出所谓的“重制版”或“用AI重新想象”的游戏画面。
而且,虽然它们看起来往往很粗糙,但如果给予足够的计算能力,并且能够实现实时操作,不难看到这种生成式AI的潜力。想象一下它作为一个后处理层在游戏中引擎中的样子,这个层可以解释相对基础的输入并产生逼真的最终产品。
这其实是我作为一名足球爱好者和FIFA/FC玩家一直感到困扰的问题——为什么它看起来不像真实比赛,我们又如何才能达到那个境界?有了人工智能处理每天世界各地每时每刻播放的海量电视转播足球比赛的数据,现在已经有足够的数据来训练一个能够使游戏画面与现实世界中的足球比赛完全一致的模型了。
突然,传统的渲染方式被彻底颠覆,光线追踪也被淘汰了。当有人可以利用人工智能来创造光照效果时,谁还需要真实的光线映射呢?如果伪造的照明看起来更真实,我非常乐意回归使用它。
你的显卡的实际GPU组件将会变得次要,只需要进行一些低分辨率多边形的粗略渲染,并使用最少的、纯粹参考性的纹理,只是为了字符识别、运动和动画。显卡中最重要的部分将是内存和矩阵处理部分,以及加速概率AI数学所需的部分,以便每8.33毫秒快速生成逼真的图像帧。
半条命(超现实主义图形)第三代视频转视频Runway ML人工智能 - YouTube
好的,当涉及到在游戏世界中处理低延迟的用户输入与预渲染视频相比时,上述内容都不容易实现,甚至不能确定是否可以实现,但如果是这种情况的话,请输出原文:Okay, none of that is easy, or even definitively achievable when it comes to working with low-latency user inputs in a gameworld versus pre-baked video, but if that becomes我们的游戏现实将会与我们现在所处的大不相同。
首先,你的游戏体验将与我的大不相同。
目前,虽然渲染是在实时进行的,但我们游戏使用的是由游戏开发者创建的预烘焙模型和纹理,并且这些内容对所有人都是相同的。无论你使用什么GPU或来自哪个制造商,今天我们游戏中视觉体验将是一样的。
如果下一代DLSS开始使用生成式AI后处理滤镜,情况将不再如此。Nvidia显然会坚持其专有立场,使用特定的模型和训练数据来制作其版本,这将会产生与AMD或Intel理论上开源版本不同的视觉效果,后者基于不同训练的数据模型运行。
天啊,由于是生成式AI,即使你们使用的是同一块GPU,也很有可能与他人有不同的视觉体验。
也许那就是故意如此。
Nvidia已经拥有它的自由风格滤镜你可以使用它来改变游戏的外观,以符合你的个人喜好。再进一步深入人工智能的世界,我们可能会进入一个你引导生成式AI滤镜来真正定制你的体验的时代。我也很期待用这样的技术玩旧游戏会是什么样子。
GTA IV 极具真实感图形 Gen-3 视频转视频 跑道 ML 人工智能 - YouTube
因为,从理论上说——在我的虚构的未来中——你可以将AI后处理叠加到旧游戏中,从而拥有一个相当惊艳的重制版。或者,更有趣的是,可以拥有一整套完全不同的视觉效果。想重新玩《侠盗猎车手V》,但又很想体验一下《热血无赖》的感觉?告诉过滤器你希望它设定在日本而不是洛桑托斯。想要每个人的脸都变成托马斯小火车的样子?当然没问题。为什么不在其中把所有的子弹换成彩弹呢?
它会让修改者失去生意,但也不会让游戏艺术家感到高兴。可怜的人们。但是如果我们愿意的话,它会让我们至少掌控游戏世界的一个方面。
这是一幅并不感觉遥远的未来景象,当我看到像克莱因教授或罗曼·贝利奇这样的照片实现版本覆盖在他们自己的角色模型上时。尽管显然还有许多重大的障碍需要克服才能达到这一目标。内存将是一个大问题。为了实现我们所讨论的那种延迟水平,这些模型很可能需要是本地的;存储在你自己的设备上。这意味着你需要大量的存储空间和内存来能够足够快地运行它们。然后还有实际的人工智能处理本身。随着我们越来越接近这样的现实,可能还会有一些更加怪异、令人不安的时刻要经历。
但这可能是值得的。只是为了重新玩一遍《半衰期》。