自 2018 年推出以来，亚马逊的 Just Walk Out 技术通过允许顾客进入商店、提货，改变了购物体验物品，无需排队付款即可离开。您可以在全球 180 多个第三方地点找到这种免结账技术，包括旅游零售商、体育场馆、娱乐场所、会议中心、主题公园、便利店、医院和大学校园。Just Walk Out 技术的端到端系统自动确定每个顾客在商店中选择的产品并提供数字收据，从而无需排队结账。
在这篇文章中，我们展示了最新一代的 Just亚马逊的 Walk Out 技术，由多模式基础模型 (FM) 提供支持。我们为实体店设计了这种多模式 FM，使用基于变压器的架构，该架构类似于许多生成人工智能 (AI) 应用程序的底层架构。该模型将帮助零售商使用来自多个输入的数据生成高度准确的购物收据，这些输入包括高架摄像机网络、货架上的专用重量传感器、数字平面图和产品目录图像。简而言之，多模态模型意味着使用来自多个输入的数据。
我们的研发（R