加入我们的每日和每周时事通讯，了解有关行业领先人工智能报道的最新更新和独家内容。了解更多
微软不满足于在其投资、合作伙伴和明显竞争对手 OpenAI 面前屈居第二，OpenAI 今天举行了第二届 DevDay，微软宣布对其 Copilot 聊天机器人进行一系列重大人工智能更新，运行 Windows 11系统和 Bing 搜索引擎。
除了少数例外，这些更新都利用人工智能，从人工智能生成的搜索结果到人工智能对话语音界面和人工智能，为用户创造更加个性化和强大的体验。为下一步采取的行动提供强有力的建议。
随着微软推出这些更新，该公司表示，隐私和负责任的人工智能仍然是公司愿景的核心，今年早些时候，该公司在安全专家和用户中获得了好评。不断截图的 Windows 11 Recall 功能反响不佳。
以下是 Microsoft 今天宣布的内容的概要：
微软的 Copilot 最初于 2023 年 2 月推出，名为 Bing Chat，随后于 2023 年 11 月重新命名，现已更新为对话语音模式，并且能够在用户许可和选择同意的情况下在屏幕上观看用户的活动，当然，通过 Microsoft Edge 网络浏览器和名为 Copilot Labs 的新程序（让人想起 Google 的搜索实验室和 Gmail 实验室产品）推出，但该程序仅适用于 Copilot Pro 订阅者（每月 20 美元）。
作为 Microsoft今天的一篇博客文章中透露：在向所有用户发布我们最先进的工具之前，我们正在对一小部分用户进行试用，以收集反馈、学习，然后将这些经验教训应用到产品中，我们希望能够立即使它们变得更好、更出色。更安全。Copilot Pro 用户可以使用它，可以将其视为即将到来的正在进行的项目的一瞥。
Mustafa Suleyman，备受争议的前 Google DeepMinder、现任 Microsoft AI 执行副总裁兼首席执行官，发布于 X：我坚信，我们可以通过现在更加直观、更加个性化和安全的副驾驶，带来一个更平静、更有帮助和支持性的技术时代。了解更多信息、下载并享受。在 Microsoft AI，我们正在为每个人打造一个 AI 伴侣。这是第一步。
新推出的功能包括：
Copilot Voice，允许用户通过自然语音与人工智能进行交流，提供四种不同的语音选项。它正在澳大利亚、加拿大、新西兰、英国和美国等英语国家推出，后续还会有更多地区和语言推出。
对于语音模式，微软发言人告诉 VentureBeat通过电子邮件得知，底层技术是 OpenAI 模型的微调版本：Copilot Voice 基于 OpenA 的最新模型构建，但由 Microsoft 进行了微调。由于这种微调，副驾驶语音的响应有所不同。它有 4 种独特的声音，更多声音即将推出。Copilot Voice 可供专业版和免费用户使用，专业版帐户的时间限制更长。
Copilot Daily，该功能旨在为用户提供易于理解的一天概览，包括新闻和天气摘要，根据他们的兴趣量身定制。信息来自包括路透社和英国《金融时报》在内的授权内容提供商，为新的一天提供精心策划、简化的开始。
Copilot Vision 是一项可供部分 Copilot Pro 用户使用的实验性功能，它带来了视觉理解功能。用户可以与图像或网页进行交互，Copilot 将解释屏幕上的内容以协助做出决策，例如比较产品选项或建议后续步骤。
微软强调，这些会话中没有任何数据存储或用于培训，强调隐私和安全。
Copilot Labs 还提供 Think Deeper 功能，该功能旨在处理更复杂的问题，为具有挑战性的查询提供详细的分步答案。目标是对生活决策、财务比较或决定购买新车或居住地点等实际困境等主题提供更深入的见解。这似乎让人想起 OpenAI 的新 o1 模型，该模型也被设计为在响应之前进行推理和执行思维链。
Copilot 还集成了视觉搜索等创意工具，使用户能够将图像上传到 AI进行分析，无论是识别狗的品种还是根据菜肴照片提供食谱创意。
人工智能甚至可以帮助完善写作，提供语气和风格的建议，并通过生成故事、诗歌和图像的工具鼓励创造力
至于哪些模型在底层为新的 Copilot 体验提供动力，微软发言人通过电子邮件告诉 VentureBeat：我们继续使用 OpenAI 的最新模型。此外，我们也开始将我们自己的内部技术应用于体验中。这种组合使我们能够更加灵活地将最佳模型应用到每个客户与 Copilot 的交互中。
有了新的随着更新的进行，Windows 11 继续发展成为更加人工智能驱动的操作系统，特别是对于拥有 Copilot PC 的用户而言。这些支持人工智能的功能旨在提高工作效率，同时保持精简、易于使用的界面。
Recall 允许用户立即检索以前在 PC 上查看过的内容。此功能是选择性加入的并由 Windows Hello 保护，确保用户隐私受到保护。通过额外的安全过滤器对信用卡详细信息等敏感信息进行保密。
“Click to Do”通过在屏幕上叠加交互式建议来帮助用户快速执行操作。无论是重写文本、编辑图像还是启动网络搜索，该工具都旨在加快工作流程，而无需手动导航。只需单击一下即可访问，Click to Do 将使 Copilot PC 上的多任务处理变得更加直观。
Windows 11 中改进的搜索利用 AI 提供更直观的文件搜索。用户现在可以用自然语言描述他们正在寻找的内容，例如烧烤派对照片，而无需记住特定的文件名或位置。此功能扩展到 OneDrive 搜索，提供了一种轻松查找照片和文档的强大方法。
微软发言人告诉 VentureBeat，支持改进搜索的人工智能模型显然都是内部模型。通过电子邮件告知：改进的 Windows 搜索模型将下载到您的 Copilot PC，并利用 NPU 跨设置、文件资源管理器和 Windows 搜索框提供改进的 Windows 搜索体验。
这些增强功能还扩展到创意应用程序。照片中的超分辨率允许用户升级低分辨率图像，而画图中的生成填充和擦除功能可以精确编辑照片，例如删除不需要的对象。这些功能利用板载人工智能来提供快速、高质量的结果。
微软的人工智能驱动的 Bing 随着推出而不断发展Bing 生成搜索。此功能超越了简单的基于关键字的查询，为更复杂的问题提供详细的、上下文丰富的答案。
Bing 生成搜索在美国推出测试版，允许用户通过键入 Bing 生成来尝试其功能在搜索栏中进行搜索，然后从显示为带有标题的图像卡的演示查询轮播中进行选择。
与提供结果列表的传统搜索引擎不同，Bing 生成搜索旨在通过以下方式创建无缝体验：综合来自多个来源的信息，并以一种有凝聚力、易于理解的格式呈现。
这对于诸如如何有效运行一对一会议或如何消除播客中的背景噪音等查询特别有用。人工智能不仅分析数百万个数据点和表面的答案，而且还分析相关见解和更深入的解释。
Bing 将从多个来源生成自己生成的信息摘要，类似于谷歌备受争议的人工智能概述功能。然而，微软看起来更具交互性，包含带有源链接和文本的弹出窗口，以及用户可以单击以快速查看摘要的不同部分的交互式目录。
一个有趣的新功能是一个深度搜索按钮，用户可以单击该按钮来获得对某个主题更深刻、更彻底的解释。该体验旨在处理信息性和复杂的查询，例如解决详细问题或探索不熟悉的主题。该平台的目标是通过维护平衡的网络生态系统来增加内容创作者和发布者的流量。微软警告称其仍处于测试阶段。
至于背后的模型，微软公司副总裁兼搜索主管 Jordi Ribas 在我在 X 上询问时告诉我，Bing 依赖于 LLM 的组合以及 SLM 或小语言模型（我指的是 Phi 系列），包括高级 GPT 模型（我认为是 OpenAIs GPT-4o 系列，早在 5 月份就推出了，此后更新了多次）。
作为优先考虑负责任的人工智能的持续努力的一部分，微软已在其所有人工智能工具中集成了隐私和安全措施。根据 Copilot 常见问题解答，用户可以控制自己的数据，并可以选择退出某些数据收集和人工智能培训功能。特别是在欧洲经济区 (EEA) 和英国等地区，Microsoft 完全遵守当地隐私法。
Copilot 的构建还旨在促进负责任的使用。人工智能提供其引用来源的引文，允许用户对信息进行事实核查。Microsoft 已将反馈循环纳入系统中，鼓励用户通过内置报告工具报告不准确或不当的内容。
Microsoft 对负责任的 AI 的重视延伸到了与 OpenAI 的合作以及保护用户免受侵害的承诺。潜在的滥用。内容过滤和滥用检测等功能旨在防止有害交互，确保 Copilot 和 Bing 为用户提供安全且具有建设性的工具。
在 Microsoft 面临用户强烈反对后，微软开始强调隐私和安全。早在 2024 年 5 月就宣布了针对 Copilot PC 的 Windows 11 Recall 功能，该功能会拍摄用户设备上存储的一系列屏幕截图，旨在让 PC 在用户要求时返回到之前的状态。然而，安全研究人员和工程师指出，该功能的行为很像间谍软件，特别是因为微软最初将其作为默认安装和打开的库存功能首次推出，用户必须跳过多个环节才能禁用该功能。此后，它仅作为选择加入的选项，并且未随 Microsoft 原始设备制造商 (OEM) 合作伙伴提供的一些初始 Copilot PC 一起发货。
通过对 Copilot、Windows 11 和 Bing 的最新更新，Microsoft 继续将自己定位在人工智能创新的最前沿。