跑道通过 Gen-3 Alpha Turbo 的全新 AI 摄像机控制实现 3D 化

2024-11-01 16:56:01 英文原文

作者:Carl Franzen

加入我们的每日和每周时事通讯,了解有关行业领先人工智能报道的最新更新和独家内容。了解更多


随着人工智能视频大战不断爆发,新的、逼真的视频生成模型早期的领先者 Runway 几乎每周都会发布一次,因此在功能方面并没有让步。

相反,这家总部位于纽约的初创公司(由 Google 和 Nvidia 等公司资助超过 1 亿美元)实际上正在部署有助于使其脱颖而出的新功能。以今天为例,它推出了一套强大的新的先进人工智能相机控制其 Gen-3 Alpha Turbo 视频生成模型。

现在,当用户根据文本提示、上传的图像或自己的视频生成新视频时,用户还可以比随机“掷骰子”更精细地控制人工智能生成的效果和场景的播放方式。¤

https://twitter.com/runwayml/status/1852363185916932182?44

相反,作为Runway 在上传到其 X 帐户的示例视频中展示,用户实际上可以放大和缩小他们的场景和主题,甚至保留人工智能生成的角色形态和他们背后的背景,将他们和他们的观众真实地带入一个完全实现的、看似 3D 的世界——就像他们身处真实的世界一样。电影拍摄地或外景地。

作为Runway 首席执行官 Crisóbal Valenzuela 在 X 上写道, “谁说 3D 了?”

这是能力上的一大飞跃。尽管其他 AI 视频生成器和 Runway 本身之前提供了摄像机控制,但它们相对生硬,并且生成新视频的方式通常看似随机且有限 - 尝试向上或向下或围绕某个主题平移有时可能会出现问题。使其变形或将其变成 2D 或导致奇怪的变形和故障。

Runway 的全新 Gen-3 Alpha Turbo 高级摄像机控制可以做什么

高级相机控制包括用于设置运动方向和强度的选项,为用户提供了塑造视觉项目的细致入微的功能。其中的亮点是,创作者可以使用水平运动围绕主题平滑地形成弧线,或从不同的有利位置探索位置,增强沉浸感和视角。

对于那些想要尝试运动动力学的人来说,该工具集允许将各种相机移动与速度斜坡相结合。

此功能对于生成视觉上引人入胜的循环或过渡特别有用,可提供更大的创作潜力。用户还可以进行戏剧性的放大,更深入地进入具有电影风格的场景,或执行快速缩小以引入新的背景,转移叙事焦点并为观众提供新鲜的视角。

该更新还包括缓慢卡车运输的选项,使摄像机能够在场景中稳定滑动。这提供了受控且有意的观看体验,非常适合强调细节或营造悬念。Runway 对这些不同选项的集成旨在改变用户对数码相机工作的思考方式,从而实现无缝过渡和增强的场景构图。

使用 Gen-3 Alpha Turbo 型号的创作者现在可以使用这些功能。要探索全套高级摄像机控制功能,用户可以访问 Runway 平台:runwayml.com。虽然我们尚未尝试新的 Runway Gen-3 Alpha Turbo 模型,但展示其功能的视频表明控制精度更高,应该可以帮助 AI 电影制作人,包括来自主要传统好莱坞工作室的制作人,例如

狮门影业 (Lionsgate),《跑道》最近与之合作– 比以往更快、更经济、更无缝地实现主要的电影质量场景。VentureBeat 通过 X 上的私信询问 Runway 是否开发了 3D AI 场景生成模型(目前来自中国和美国的其他竞争对手(例如 Midjourney)正在开发这种模型)Valenzuela 回应:“世界模型:-)

. –

Runway 于 2023 年 12 月(即近一年前)首次提到其正在构建旨在模拟物理世界的人工智能模型,当时联合创始人兼首席技术官 (CTO) Anastasis Germanidis 在跑道网站关于这个概念,指出:

世界模型是一种人工智能系统,它构建环境的内部表示,并用它来模拟该环境中的未来事件。迄今为止,世界模型的研究主要集中在非常有限和受控的设置上,无论是在玩具模拟世界中(比如那些 视频游戏)或狭隘的背景(例如开发 世界驾驶模型)。一般世界模型的目标是表示和模拟各种情况和交互,就像在现实世界中遇到的情况一样。

正如今天推出的新相机控件所证明的那样,Runway 在构建此类模型并将其部署给用户的过程中进展顺利。

VB日报

保持了解!每天在您的收件箱中获取最新消息

订阅即表示您同意 VentureBeat 的服务条款。

感谢您的订阅。查看更多VB 时事通讯在这里

发生错误。

关于《跑道通过 Gen-3 Alpha Turbo 的全新 AI 摄像机控制实现 3D 化》的评论


暂无评论

发表评论