反射毁了你的照片？这就是 Adob​​e 推出新的 AI 删除工具的原因

很可能您已经拍摄了一张完美的照片，光线和构图都很好，但却被反射完全毁了。当然，我在博物馆和水族馆拍摄的许多照片都因为我举起手机的反射而毁掉了我想要捕捉的绘画或海龟。这就是为什么 Adob​​e 的最新编辑功能使用 AI 来更轻松地消除反射。

上周宣布，反射去除是 Photoshop 的 Camera Raw 插件中的一项全新功能。Adobe 副总裁兼研究员马克·莱沃伊 (Marc Levoy) 在一份报告中表示：“我们的目标是帮助您将原本可能会删除的照片变成一张足以分享的照片。” 博客发布。 

在接受 CNET 独家采访时，Levoy 向我们介绍了该工具的工作原理、团队为何不使用生成式人工智能以及接下来会发生什么。

建筑物反光去除

尽管 Levoy 于 2020 年才加入 Adob​​e，但他是数字摄影领域的巨头。作为斯坦福大学的研究人员，他的工作帮助开创了计算摄影以及捕获和处理图像和图形的数字过程。他帮助领导了谷歌受人尊敬的 像素相机应用团队，并且是 美国国家工程院。一个 

自加入 Adob​​e 以来，Levoy 参与了各种摄影和人工智能项目，包括推出适用于 Adob​​e 的相机应用程序，即现已停产的 Photoshop Camera。在一个 2022 年 CNET 采访在讨论 Levoy对该应用程序的愿景时，他特别指出了他非常希望推出一个处理反射的工具。虽然相机应用程序中的大部分技术已在 Adob​​e Express 中找到了新家，但 Levoy 在 2022 年设想的一键反射消除技术现已在 Camera Raw 中成为现实。

该工具的工作原理很大程度上要归功于人工智能。然而，该功能不使用生成式人工智能，因此它不会在图像中创建新元素或区域。莱沃伊解释说，带有反射的照片就像两张不同图像的总和。反射消除的工作及其背后的人工智能模型是区分两者。

“去除窗户反射归根结底是将被反射污染的照片分离为透射图像（透过窗户的场景）和反射图像（摄影师后面的场景）。分离任务与生成任务有很大不同，并且调用一种不同类型的人工智能模型，”Levoy 说。

Levoy 和他的团队 Eric Kee 和 Adam Pikielny 使用成对的干净且充满反射的图像来训练模型，以创建将原始图像与反射相结合的新图像。然后，模型必须正确识别原始图像是什么，教它将预期的主题与意外的反射区分开。删除工具现在擅长隔离不同的图像，这意味着创作者不需要使用生成人工智能来编辑反射。

“没有理由在透射和反射场景部分可见的部分使用生成式人工智能，”莱沃伊说。

对于对生成人工智能持谨慎态度的摄影师来说，这是个好消息。Adobe 花费了大量时间和金钱将其照片和视频编辑升级为结合人工智能。人工智能在今年公司的年度创意大会上占据了中心舞台，生成式人工智能为一切提供了动力，从更流畅的到更流畅的 视频转场完全地 重新照亮黑暗的照片。在某些情况下，Adobe 的生成式 AI 编辑工具可能有助于处理反射非常明亮、使相机传感器饱和为白色的照片。但反射消除为摄影师提供了一种非生成性的方法来快速处理这些干扰。

反射去除目前适用于原始图像，并且可作为 Beta 技术预览使用（意味着它现在可用，但仍在积极开发中）。未来，Adobe 计划扩展 AI 工具，使其与其他图像文件类型（如 JPEG 和 HEIC）兼容，并改进该工具以消除较小的反射。它还计划将该工具引入其 灯室生态系统，这是莱沃伊特别感兴趣的。 

“我迫不及待地想在 Lightroom Mobile 中使用此功能，”Levoy 说。“我想去水族馆，给被反光污染的鲨鱼缸拍张照片，点击一个按钮，欣赏干净的照片，而我周围的人则难以置信地盯着我手机上的图像。我会微笑并告诉他们如何将该功能下载到自己的手机上。”