这些基于订阅的开发者眼镜旨在实现 Quest 3 和 Vision Pro 等更大头戴式耳机可以实现的目标还没有。
九月一个温暖的日子，在纽约的一家酒店，我站在露台上，俯身抚摸一只不在那儿的可爱宠物。虚拟橄榄石好友跳来跳去，跟着我。它很像我在手机甚至 Meta Quest 3 等耳机上尝试过的其他虚拟宠物。这一次，我看到它通过透明镜片投射，这些镜片会像太阳镜一样自动变暗，以确保在虚拟环境中清晰地看到虚拟体验。明亮的日光。我只戴了一副厚实但独立的眼镜：Snap 的新款 AR 眼镜。这些是我将来可能穿的衣服吗？如果是这样，需要多长时间才能实现这一目标？
今年早些时候，我看到了很多病毒视频，人们在户外、滑雪、滑冰、公园……任何地方都戴着 Apple Vision Pro 耳机。Vision Pro 和 Quest 3 耳机并不适合日常户外使用，但 Snap 的 AR Spectacles 却适合。该公司在洛杉矶举行的开发者大会上宣布，它们是 Spectacles Snap 多年来制造的最新版本。Snap 早在 2021 年就首次推出了独立的 AR 眼镜；大流行期间我在后院尝试过这些。新的眼镜更大，但功能也更强大。它们具有像 Vision Pro 和 Quest 3 这样的手势，还有一个完整的 Snap 操作系统，可以运行浏览器、启动不同的应用程序并与附近的手机连接。
这些 Snap 眼镜甚至不是为日常使用而设计的人们。它们是开发者硬件，作为 Snap 开发者套件的一部分，以每月 99 美元的价格提供订阅。这表明 Snap 知道世界还没有为 AR 眼镜做好准备，消费技术也没有做好准备。Snap 比竞争对手稍稍领先一步。
Meta 等公司（可能还有谷歌和苹果）正在尝试开发更小的 AR 眼镜，以克服混合现实的笨重限制VR眼镜。我见过制造此类眼镜的尝试，但它们通常必须连接到手机、计算机或某种外部处理器才能工作并保持眼镜较小。
Snap 的 AR 眼镜将所有处理和电池就在眼镜上——不需要其他任何东西。这意味着它们可以轻松佩戴，无需任何额外的电缆，但目前形式的眼镜很厚实，比我戴在脸上的任何眼镜都要奇怪得多。镜框很厚，镜片中间仍然有彩虹状的斑块，波导反射从侧面安装的 LCOS 微型投影仪投射的虚拟图像。
电池寿命也极其有限。续航时间约为 45 分钟，远不能满足全天使用的需要。尽管与 Snap 的 2021 版 AR 眼镜一样，这些仍然是为开发人员设计的。Snap 首席技术官兼联合创始人 Bobby Murphy 表示，这些都是探索性设备，目的是了解 Snapchat 手机应用程序上 Snap 现有的 AR 镜头如何实现眼镜形式的有益飞跃。
这完全相同Snap 在 2021 年收回了这一方法，但处理能力得到了提升。机载双高通处理器（我没有被告知是哪一个），可以提供一些非常清晰（尽管有时有些卡顿）的图形。该眼镜只有 46 度的视角，对于 AR 眼镜来说还可以，但比 VR 耳机要少得多。感觉就像我正在通过一扇又高又窄的窗户观看混合现实，窗户的尺寸与大手机屏幕差不多。
我 2021 年的演示与现在的一个很大的区别是处方镜片插入。上次我不得不戴隐形眼镜，但类似于 Meta 和 Apple 已经提供的卡扣式镜片也适用于这些眼镜。不幸的是，在演示期间 Snap 没有我的处方，所以我的 AR 早上有点模糊。能够看到体验已经足够好了。
Snap 的 Spectacles 使用外部摄像头来追踪世界，但像 Apple Vision Pro 和 Meta Quest 一样添加了手势追踪耳机。我可以点击虚拟按钮、抚摸虚拟生物、在空中绘画或在远处捏东西。Snap OS 有一个漂浮在空中的应用程序仪表板，当我翻转它时，虚拟按钮就会出现在我的手上。
Spectacles 没有眼动追踪功能，因此选择对象需要更多的努力比苹果公司的一目了然选择Vision Pro。手机也可以与眼镜连接，提供另一种交互方式。
与 Meta 甚至 Apple 相比，Snap 的方法目前的不同之处在于它是互连的与电话。我尝试了几个演示，使用附近的手机来控制眼镜上的 AR 体验。我使用像遥控器一样的手机来驾驶 AR 直升机在房间里飞行，并使用屏幕上的按钮进行控制。我还拿着一部像高尔夫球杆一样的手机，在 AR 高尔夫球场中挥杆开球，看起来就像半传送到我所在的酒店房间一样。
Snap 的 Snapchat 手机应用程序将管理眼镜还允许其他人连接并查看我在眼镜上看到的 AR 体验。据 Snap 称，长期目标是让使用 Snapchat 的手机与这些眼镜进行交互。
“我们绝对认为有很多开放空间可以继续探索手机和 Spectacles 之间的联系，”Snap 的墨菲对我说。
从短期来看，这款眼镜仅适用于其他 AR 眼镜佩戴者，这可能是有充分理由的：手机操作系统尚不能与 AR 眼镜很好地配合。苹果和谷歌都还没有采取行动让耳机和眼镜感觉真正集成，在他们这样做之前，其他公司将面临兼容性瓶颈，除非他们使用专用的手机应用程序，或者像 Xreal 一样，构建自己的定制类手机硬件。即便如此，连接性也并不理想。
Snap 的 Snapchat 手机应用程序上已经拥有一系列深入的 AR 工具，从世界扫描协作体验到特定位置的 AR。自 2021 年以来，Snap 的 AR 功能得到了改进，这些新眼镜可以利用这一点。
我尝试过的一件事是协作绘画。我用手指在空中画画，而 Snap 团队的一名成员戴着另一副眼镜，在我旁边画画。该眼镜可以识别附近的另一个佩戴者并分享体验，甚至可以与四个机载摄像头协作将房间扫描成混合现实的网格。
在酒店房间中的连接并不总是即时的，但那眼镜与眼镜之间的合作是这里的一个重要组成部分。Snap 的目标是在户外区域（甚至是博物馆或艺术展览）提供多人团体体验，以测试这些体验对于实时沉浸式激活的效果如何。乐高积木的搭建体验很简单，但它展示了如果一群人可以一起制作特定地点的雕塑的可能性。
这些眼镜专为户外佩戴而设计，具有自动调光镜片，类似于Magic Leap 2 上的技术。Magic Leap 2 有一个大型外部夹式处理器。
Snap 的一些早期合作伙伴包括 Niantic（以 Pokmon Go 闻名）以及一家还多年来一直在探索户外 AR 眼镜的未来。另一个合作伙伴 ILM Immersive 已经在 VR 和混合现实耳机上打造了星球大战和漫威体验。
Snap 也在合作与 OpenAI 合作，这一举措对于 2024 年来说似乎并不令人意外。今年春天，一波配备摄像头的 AI 可穿戴设备，包括 Meta 的 Ray-Bans 和 Humane AI Pin，试图展示“多模式”生成式 AI 的承诺，这些设备可以访问摄像头和音频输入一起提供帮助或用于生成人工智能创意应用程序。Meta Quest 3 和 Apple Vision Pro 等混合现实耳机尚未利用支持摄像头的 AI，因为开发人员的摄像头权限受到更多锁定。
Snap 进一步开放其摄像头访问权限：OpenAI 挂钩-ins 可以使用眼镜的摄像头和麦克风来生成 AI 镜头应用程序，类似于 Snapchat 手机应用程序现在提供的功能。（Snap 还支持 AR 应用程序的相机访问，但这些应用程序的在线访问被锁定，而 OpenAI 连接的相机访问则在线开放。）
“当人们可能想要使用外部服务时，我们”我们将更加谨慎和控制，并可能与开发商或第三方服务提供商合作，建立此类保障措施，”墨菲说。在 Snapchat 手机应用程序上，已经有使用相机的生成式 AI 工具。我们最终可能会看到其中一些现在也转移到眼镜上。
我尝试使用 Snap 的生成式 AI 生成一些 3D 表情符号，并导航一个教育太阳系镜头应用程序，该应用程序使用我的请求接受我的请求。嗓音。我发现演示期间的响应很滞后，并且眼镜并不总是理解我在说什么（尽管这可能是酒店房间或其他地方的连接）。Snap 将摄像头开放给人工智能 AR 技术，感觉比 Meta 和苹果目前领先了一步。不过，这种情况可能很快就会改变：Meta 预计很快就会展示新的 AI 和 AR 更新，而苹果可能会在明年在 Vision Pro 上引入 Apple Intelligence 功能。