李飞飞的世界实验室以其首款商业产品 Marble 加速世界模特竞赛 |TechCrunch

，人工智能先驱创立的初创公司李飞飞,正在推出其首款商业世界模型产品。大理石现在可以通过免费增值和付费层级提供，让用户将文本提示、照片、视频、3D 布局或全景图转换为可编辑、可下载的 3D 环境。生成世界模型的推出，

首次以有限测试版发布两个月前的预览，距离世界实验室一年多一点走出隐身状态获得了 2.3 亿美元的资金，使这家初创公司领先于构建世界模型的竞争对手。世界模型是生成环境内部表示的人工智能系统，可用于预测未来结果和计划行动。

初创公司喜欢迪卡特和奥德赛已经发布了免费演示，并且Google 的精灵仍处于有限的研究预览阶段。Marble 与这些甚至 World Labs 自己的实时模型不同，实时FM– 因为它创建持久的、可下载的 3D 环境，而不是在您探索时动态生成世界。该公司表示，这会减少变形或不一致，并允许用户将世界导出为高斯图、网格或视频。

Marble 也是同类中第一个提供 AI 原生编辑工具和混合 3D 编辑器的模型，可让用户在 AI 填充视觉细节之前屏蔽空间结构。 

– 这是生成 3D 世界的全新模型类别，并且随着时间的推移会变得更好。World Labs 联合创始人贾斯汀·约翰逊 (Justin Johnson) 告诉 TechCrunch，我们已经在这方面做出了很大改进。 

去年12月，世界实验室展示了其早期模型如何可以基于单个图像生成交互式 3D 场景。虽然令人印象深刻，但有些卡通化的场景并不能完全探索，因为运动仅限于一个小区域，并且偶尔会出现渲染错误。 

在测试版预览的试用中，我发现 Marble 仅通过图像提示就生成了令人印象深刻的世界 - 从类似游戏的环境到我客厅的真实版本。场景边缘发生了变化，不过在今天的发布中显然得到了改进。也就是说，我在测试版中使用单个提示生成的世界看起来比现在的相同提示更好，并且更符合我的意图。 

我还没有测试编辑功能，尽管 Johnson 表示它们使 Marble 对于近期游戏、视觉特效和虚拟现实 (VR) 项目来说非常实用。 

“我们 Marble 未来的主题之一是创意控制，”约翰逊说。– 应该始终有一条快速途径来生成某些东西，但您应该能够更深入地研究并更好地控制您正在生成的东西。您不希望机器只是接管方向盘并剥夺您的所有创造力。” 

Marble 的创意控制始于输入灵活性。Beta 版仅接受单个图像，迫使模型为 360 度视图发明看不见的细节。随着全面发布，用户现在可以上传多个图像或短片以从不同角度展示空间，并让模型生成相当逼真的数字双胞胎。 

然后我们有 Chisel，一个实验性的 3D 编辑器，它可以让用户屏蔽粗略的空间布局（比如墙壁、盒子或平面），然后添加文本提示来指导视觉风格。Marble 生成世界，将结构与风格解耦——类似于 HTML 提供网站结构和 CSS 添加颜色的方式。与基于文本的编辑不同，Chisel 允许您直接操作对象。 

“我可以直接进入那里，抓住代表沙发的 3D 块，然后将其移到其他地方，”Johnson 说。 

另一个为您提供更多编辑控制的新功能是扩展世界的能力。 

“一旦你生成了一个世界，你就可以将它扩展到一次，”约翰逊说。– 当您移动到世界开始分裂的一部分时，您基本上可以告诉模型在那里扩展或在您当前所在位置附近生成更多世界，然后它可以在该区域添加更多细节。 –

想要创造极大空间的用户可以通过“作曲家模式”将多个世界结合起来。约翰逊用他已经建造的两个世界向我展示了这一点——一个是用奶酪制成的房间，配有葡萄椅，另一个是太空中的未来派会议室。

空间智能之路

Marble 可通过四个订阅级别获得：免费（文本、图像或全景四代）、标准（20 美元/月，12 代加上多图像/视频输入和高级编辑）、专业版（35 美元/月，25 代，具有场景扩展和商业权利）和 Max（95 美元/月，所有功能和 75 代）。 

Johnson 认为 Marble 的最初用例将是游戏、电影视觉效果和虚拟现实。 

游戏开发者对这项技术的感受很复杂。最近的一个游戏开发者大会调查发现三分之一的受访者认为生成式人工智能对游戏行业有负面影响——比一年前的调查结果高出 12%。知识产权盗窃、能源消耗以及人工智能生成内容的质量下降是最受关注的问题。而去年，一个有线调查发现，像动视暴雪这样的游戏工作室正在使用人工智能来走捷径并减少人员流失。 

在游戏中，Johnson 看到开发人员使用 Marble 生成背景环境和环境空间，然后将这些资源导入到 Unity 或 Unreal Engine 等游戏引擎中以添加交互元素、逻辑和代码。 

“它并不是为了取代整个现有的游戏渠道而设计的，而是为了给你提供可以放入该渠道的资产，”他说。 

Johnson 表示，对于 VFX 工作，Marble 避免了困扰 AI 视频生成器的不一致和摄像机控制不佳的问题。他说，它的 3D 资产让艺术家能够以完美的帧精度布置场景并控制摄像机的移动。 

虽然 Johnson 表示 World Labs 目前并不专注于虚拟现实 (VR) 应用，但他指出该行业“缺乏内容”并且兴奋关于发射。Marble 已经与 Vision Pro 和 Quest 3 VR 耳机兼容，现在每个生成的世界都可以在 VR 中观看。

大理石也可能具有机器人技术的潜在用例。约翰逊指出，与图像和视频生成不同，机器人技术不具备大型训练数据存储库的优势。但使用像 Marble 这样的生成器，模拟训练环境变得更加容易。 

根据一个最近的宣言作者：World Labs 首席执行官兼联合创始人李飞飞，Marble 代表着创建“真正的空间智能世界模型”的第一步。 

李相信，“下一代世界模型将使机器能够在全新的水平上实现空间智能。”如果大型语言模型可以教机器读写，李希望像 Marble 这样的系统可以教它们观察和建造。她说，理解事物如何在三维空间中存在和相互作用的能力最终可以帮助机器在游戏和机器人技术之外取得突破，甚至进入科学和医学领域。 

“如果没有空间智能，我们对真正智能机器的梦想就不会完整，”李写道。

有敏感提示或机密文件吗？我们正在报道人工智能行业的内部运作——从塑造其未来的公司到受其决策影响的人们。联系丽贝卡·贝兰 (Rebecca Bellan) rebecca.bellan@techcrunch.com 或拉塞尔·布兰登 (Russell Brandom)，邮箱：russell.brandom@techcrunch.com。为了安全通信，您可以通过 Signal 与他们联系：@rebeccabellan.491 和罗素布兰登.49。