谷歌的人工智能在43%的金融查询中失败,研究发现

2024-10-21 15:31:12 英文原文

作者:Matt G. Southern

一项研究发现,在与金融相关的搜索中,谷歌的AI概要提供了误导性或不准确信息的比例为43%。

  • 谷歌AI在43%与金融相关的搜索中概述不准确。
  • AI在处理像税收、投资和学生贷款这样的复杂话题时最为挣扎。
  • 专家警告说,这种错误信息可能会损害用户的财务决策。

《College Investor》的一项研究发现,谷歌生成的金融查询AI摘要存在显著不准确之处。

在100次个人财务搜索中,有43%包含误导性或错误的信息。

关键发现

该研究评估了人工智能在包括银行业、信贷、投资、税务和学生贷款等各类金融话题中的概述。

结果显示:

  • 57%的人工智能综述是准确的
  • 43%包含误导或不准确的信息
  • 12% 完全错误
  • 31% 的信息要么具有误导性,要么缺少关键细节

关注领域

研究人员注意到,AI在处理诸如税收、投资和学生贷款等复杂的财务问题上最为吃力。

一些最令人担忧的问题包括:

  • 过时的学生贷款还款计划信息
  • 关于IRA供款限额的不正确信息
  • 关于529高校储蓄计划的误导性陈述
  • 不准确的税务信息,如果遵循可能会导致处罚

该AI很好地处理了基本的金融概念,但忽略了重要的例外情况和最近的政策变化。

谷歌AI答对的查询与答错的查询中有显著的模式。

这里有一些常见的主题。

谷歌AI回答正确的查询

  • 基本定义和解释例如,“什么是电汇?”和“信用卡是如何工作的?”
  • 简单直接的问题我是否必须偿还学生贷款?
  • 最近的热门话题:“追捕漏洞(Chase Glitch)是什么?”
  • 一般保险问题我应该什么时候购买人寿保险?

谷歌AI答错的问题查询

  • 复杂的税务话题例如,“你可以用529计划来支付罗兹个人退休账户吗?”和“拥有房产的有限责任公司对税务有帮助吗?”请注意,原文中的“Roth IRA”在这里被翻译为“罗兹个人退休账户”,但实际上通常翻译为“罗斯个人退休账户”。如果需要更准确的专业术语翻译,请告知。
  • 细腻的金融产品“IUL是否比401k更好?”
  • 时效性信息: 像过时的学生贷款还款计划或储蓄账户利率。
  • 州特定财务规定例如,歪曲加州529计划的规定。
  • 需要上下文依赖回答的问题我可以以独立身份填写FAFSA吗?
  • 关于财务限额或阈值的查询例如,错误的IRA供款限额。
  • 复杂的助学贷款问题特别是关于宽恕计划和还款计划。
  • 投资比较:“年金比定期存款好吗?”

这意味着什么

谷歌的人工智能在给出事实性问题的直接答案方面表现良好。

另一方面,它在理解细微差别、获取最新信息和考虑多种因素方面存在困难。

这表明人工智能可以处理基本的金融知识话题,但对于复杂的财务决策或建议不可靠。

潜在影响

罗伯特·法灵顿,The College Investor的创始人,对这些发现表示担忧,他说:

“如果谷歌继续向搜索者提供有关金钱话题的错误或误导性信息,不仅会损害他们的个人财务,还可能削弱美国已经薄弱的金融素养。”

该研究指出,遵循人工智能的指导可能导致消费者遭受税务处罚或财务损失。

学院投资者认为谷歌应该禁用这些与财务相关查询相关的AI生成概要,特别是关于税收和投资的那些。

展望未来

在依赖AI生成的摘要进行财务决策时,搜索者必须谨慎行事。

当被问及错误信息的问题时,谷歌此前曾表示,“绝大多数AI概览提供了高质量的信息。”

完整的研究,包括详细的例子和方法论,在The College Investor网站上可以找到。网站.


特色图片:小城航司/Shutterstock

SEJ工作人员 高级新闻作家搜索引擎期刊

Matt G. Southern,资深新闻作家,自2013年以来一直在搜索引擎期刊工作。他拥有通信学学士学位,...

关于《谷歌的人工智能在43%的金融查询中失败,研究发现》
暂无评论

摘要

一项研究发现,谷歌的AI概览在43%与金融相关的搜索中提供误导性或不准确的信息。结果显示: 57%的AI概览是准确的 43%包含误导性或不准确信息 12%完全错误 31%要么具有误导性,要么缺少关键细节 关注领域 研究人员注意到,AI在处理复杂的金融话题(如税收、投资和学生贷款)时表现最差。简单直接的问题:例如“我必须偿还学生贷款吗?”可能产生的影响 《大学投资者》的创始人罗伯特·法灵顿对这些发现表示担忧,并指出: “如果谷歌继续向搜索者提供有关金钱主题的错误或误导性信息,不仅会损害他们的个人财务状况,还可能削弱美国已经薄弱的金融素养。”完整的研究报告,包括详细示例和方法论,在《大学投资者》网站上可获取。