作者:November 14, 2024 — 01:07 am EST
要在收件箱中接收技术更新,请注册新闻通讯ARPU值。
据彭博社报道,尽管人工智能 (AI) 领域多年来取得了快速发展,但该领域的三大领先公司——OpenAI、谷歌和 Anthropic——在开发更复杂模型的过程中面临着意想不到的障碍。
OpenAI 的最新模型(内部称为 Orion)未能达到公司的业绩预期。虽然该模型最初预计将显着超越 ChatGPT 背后的技术的先前版本,但它在关键领域存在不足,特别是在回答训练数据之外的编码问题方面。
知情人士向彭博社表示:“到目前为止,Orion 相对于 OpenAI 现有模型的进步并不像 GPT-4 相对于 GPT-3.5 那样大。”
据三位消息人士透露,谷歌即将推出的 Gemini 软件迭代也面临着挑战。与此同时,Anthropic 在发布其期待已久的 Claude 模型 3.5 Opus 时遇到了延迟。
有几个因素导致了这些挫折。这些公司正在努力寻找新的高质量、人造训练数据来源,以用于构建更先进的人工智能系统。此外,与开发和运营新车型相关的巨大成本引发了人们的疑问:适度的改进是否值得投资。
人工智能初创公司 Hugging Face 的首席伦理科学家玛格丽特·米切尔 (Margaret Mitchell) 向彭博社表示:“AGI 泡沫正在一点点破裂。”“很明显,可能需要‘不同的训练方法’才能使人工智能模型在各种任务上都能很好地工作。”
OpenAI 目前正在为 Orion 进行后期训练,该过程涉及结合人类反馈来改进响应并完善模型与用户的交互。然而,该模型尚未达到 OpenAI 希望公开发布的水平,该公司不太可能在明年初之前推出该系统。
这些挑战引发了人们对“规模法则”理论有效性的担忧,该理论认为更多的计算能力、数据和更大的模型将不可避免地导致人工智能能力的显着进步。
这些挫折也让人们对实现通用人工智能(AGI)的可行性产生了怀疑,这是一种假设的人工智能系统,可以在各种智力任务上达到或超过人类智能。
Anthropic 首席执行官达里奥·阿莫迪 (Dario Amodei) 在最近的播客中表示:“人们称其为缩放定律。这是用词不当。”“它们不是宇宙法则。它们是经验规律。我打赌它们会继续下去,但我对此并不确定。”
这些公司正在探索应对挑战的替代方法,包括利用与出版商的合作伙伴关系来获取高质量数据,以及聘请专家来标记与特定专业领域相关的数据。他们还在尝试合成数据,但这种方法有其局限性。
New Enterprise Associates 的人工智能战略主管 Lila Tretikov 表示:“数据的重点不是数量,而是数据的质量和多样性。”“我们可以综合生成数量,但在没有人类指导的情况下,我们很难获得独特的高质量数据集,尤其是在语言方面。”
尽管面临这些挑战,人工智能公司仍在继续大力投资开发更大、更复杂的模型。然而,进展速度是不确定的,重点正在转向为现有模型寻找新的用例。
“我们将拥有越来越好的模型,”OpenAI 首席执行官 Sam Altman 在最近的 Reddit AMA 中写道。“但我认为下一个巨大突破将是代理。”
本文表达的观点和意见是作者的观点和意见,并不一定反映纳斯达克公司的观点和意见。