2024-09-16 20:00:09 英文原文
你在公园散步的电影在几分钟内就变成罗马的活雕像或森林中的猿
视频到视频是 Runway 视频的最后一个主要新增功能创建选项。Runway 已经允许用户从文本或图像开始定义视频的外观和动作。现在，通过从真实世界的视频开始，用户可以预先定义运动，然后使用人工智能来改变设计和美学。Runway 在大量带有详细说明的视频和图像上训练了该功能，以教导 AI 模型如何理解上传的电影以及更改电影的提示。这就像观看完全来自另一个宇宙的新视频。您可以在下面看到它的工作原理。
“视频到视频代表了一种新的控制机制，可在几代人之间实现精确的运动、表现力和意图，”Runway 在社交媒体上解释道。“要使用视频到视频，只需上传您的输入视频，以您喜欢的任何美学方向提示，或者从一组预设样式中进行选择。”
组合时凭借 Gen-3 Alpha 现有的处理复杂过渡和富有表现力的人脸和情感的能力，结果可能会非常惊人。Runway 很快就用新选项增强了 Gen-3 Alpha。最近，该公司展示了其模型的 Gen-3 Alpha Turbo 版本，该版本牺牲了一些功能以提高速度。除了视频到视频改造选项外，该工具还可以与运动画笔、高级相机控制、导演模式和其他更精细的视频编辑功能配合使用。
Gen-3 Alpha 表现出色比 Gen-2 型号更加通用且用户友好。也就是说，尽管其产量令人印象深刻，但它确实有局限性。目前，它可以生成长达 10 秒的视频剪辑，这几乎不是长片。速度和质量可能会弥补这一点，直到它可以走得更远。不过，Runway 必须超越的竞争越来越多。
最著名的是 OpenAI 的 Sora 模型，但它远非唯一一个。Stability AI、Pika、Luma Labs 的 Dream Machine 等都在竞相将 AI 视频模型推向公众。就连 TikTok 的母公司字节跳动也有一款名为 Jimeng 的人工智能视频制作工具。
如果您想尝试 Runway 的视频转视频工具，用户可以通过付费套餐使用 Gen-3 Alpha，起价 12 美元每月。
订阅突发新闻、评论、意见、顶级技术交易等。
Eric Hal Schwartz 是 TechRadar 的自由撰稿人，在世界与技术交叉领域拥有超过 15 年的经验。在过去的五年里，他担任 Voicebot.ai 的首席撰稿人，在生成式人工智能和大型语言模型的报道领域处于领先地位。此后，他成为生成式人工智能模型产品的专家，例如 OpenAIs ChatGPT、Anthropics Claude、Google Gemini 以及其他所有合成媒体工具。他的经验涉及各个媒体领域，包括印刷媒体、数字媒体、广播和现场活动。现在，他继续讲述人们想要和需要听到的关于快速发展的人工智能领域及其对他们生活的影响的故事。埃里克 (Eric) 居住在纽约市。