研究称,ChatGPT 等大肆宣传的人工智能产品可能会给医生提供“有害”建议 - Medical Xpress

2024-09-16 16:05:10 英文原文

本文已根据 Science X 的编辑流程和政策进行审阅。编辑在确保内容可信度的同时强调了以下属性:

经过事实检查

可信来源

校对

大肆宣传的人工智能产品研究称,ChatGPT 等可以为医生提供“有害”建议

ChatGPT 等大肆宣传的人工智能产品可能为医生和医疗保健专业人员提供的信息可能会加重患者的病情并导致严重的健康后果一项研究表明。

研究人员在他们的研究中考虑了三种与营养相关的疾病,两名经验丰富的营养师根据医学指南检查了总共 63 项 ChatGPT 疾病管理结果。

他们的发现向仅依靠人工智能和相关产品向患者传递健康和医疗建议的医务人员和卫生人员发出警告。

“该研究警告不要仅依靠人工智能界面来管理糖尿病和代谢沙迦大学营养流行病学教授法拉·纳贾 (Farah Naja) 说:“我们发现了异常情况,并强调需要咨询营养师和医疗保健团队的其他成员。”“ChatGPT 可能会提供不正确、不完整或有害的建议,从而危及医疗护理质量,进而危及患者的健康和安全。”

Prof.Naja 是《欧洲临床营养学杂志》上发表的这项研究的主要作者,在该研究中,来自阿拉伯联合酋长国、黎巴嫩、巴林和土耳其的科学家调查了 ChatGPT 对有关如何管理和预防糖尿病和代谢的各种提示的正确性和准确性。

该研究涵盖三个主要领域:1)饮食管理,2)营养护理过程和3)1,500卡路里饮食的菜单规划。对于每个域,开发了 3 个提示,这意味着每个条件有 9 个提示。

“2023 年 10 月,通过 OpenAI 提供的 ChatGPT 接口,总共 63 个提示被输入到 GPT3.5-turbo0301 模型中。两位经验丰富的营养师评估了聊天机器人的输出与营养与饮食学会指南的一致性,”科学家们写道。

根据纳贾教授的说法,科学家们希望“提高人们对人工智能作用的认识”指导糖尿病和代谢异常等疾病的饮食护理。”她补充说,他们的目标是评估和衡量 ChatGPT 在为 2 型糖尿病、代谢综合征及其组成部分提供营养管理方面的准确性。

“糖尿病和高血糖和高血脂等代谢异常这些疾病广泛存在,并且在世界大部分地区的患病率不断增加,给个人、社会和政府带来了重大挑战。”

“除了药物治疗外,这些疾病的管理还需要微妙且往往复杂的方法生活方式行为的改变,包括饮食摄入。”

为了评估 ChatGPT 的局限性,研究人员根据其公共健康影响和风险因素选择了七种与饮食相关的代谢疾病。它们包括2型糖尿病、代谢综合征及其组成部分,即向心性肥胖、高血糖、高血压、高密度脂蛋白水平低和高甘油三酯血症。

Prof.Naja 提到了减肥,她说减肥“对于管理糖尿病和代谢异常至关重要……然而 ChatGPT 的输出未能达到减肥建议以及实现能量不足的指导。”

当被要求提供研究中考虑的健康状况的样本菜单时,Naja 教授坚持认为,除了钙和维生素 D 之外,ChatGPT 的输出在能量、碳水化合物和脂肪方面不符合要求。

据世界卫生组织 (WHO) 统计,每年有 1700 万人死于非传染性疾病,其中 200 万人患有糖尿病。

世界卫生组织将 19% 归因于糖尿病。超重和高血压等代谢风险因素导致全球死亡,这是该研究三个主要营养管理相关领域的一部分。

在他们的研究中,科学家们强调“美国心脏协会和美国糖尿病协会认为改变生活方式(包括营养管理)作为一线治疗,与药物治疗相比,逆转代谢综合征的效果是药物治疗的 1.59 倍。”

作者承认 ChatGPT 在营养相关方面的作用健康问题,强调其“动态对话能力”及其提供“个性化和有吸引力的教育”的潜力。

他们还指出,“越来越多的 ChatGPT 现实世界应用程序已经启动”在营养和健康领域,包括营养咨询平台、健康和健身应用程序、公共卫生运动以及聊天机器人纳入学校健康和营养课程。”

但是,他们强调,关于是否存在以下问题的研究还很少:“在营养教育中使用 ChatGPT 的变革潜力”及其巨大的潜在力量可能会“限制提供临床营养建议”。

Prof.Naja 表示,研究发现 ChatGPT 错过了“适当的身体活动和减肥建议以及实现能量不足的指导”,尽管它们“对于糖尿病和代谢异常的管理至关重要”。

“ChatGPT 的输出是对于特定营养素的指导并不完整,并且没有解决在所有考虑的条件下增加纤维摄入量或食用全谷物产品的需要。”

该研究得出的结论是,“ChatGPT 以及其他潜在的未来人工智能聊天机器人以“类似人类”的方式对用户的提示作出反应,但无法取代营养师的专业知识和批判性判断。

“虽然医疗保健从业者可能会出于各种目的参考这种日益可用的技术,但他们还必须对在临床实践中仅仅依赖人工智能聊天机器人持谨慎态度,并应共同提高对相关风险的认识。”

更多信息:Farah Naja 等人,用于糖尿病和代谢营养管理的人工智能聊天机器人综合症,欧洲临床营养杂志(2024)。DOI:10.1038/s41430-024-01476-y

摘要

本文已根据 Science X 的编辑流程和政策进行审阅。沙迦大学营养流行病学教授法拉·纳贾 (Farah Naja) 表示:“该研究警告不要仅仅依靠人工智能界面来管理糖尿病和代谢异常,并强调需要咨询营养师和医疗保健团队的其他成员。”” “糖尿病和高血糖、高血脂等代谢异常现象十分普遍,并且在世界大部分地区患病率持续上升,给个人、社会和政府带来了重大挑战。“当被要求提供研究中考虑的健康状况的样本菜单时,Naja 教授坚持认为,除了钙和维生素 D 之外,ChatGPT 的输出在能量、碳水化合物和脂肪方面不符合要求。”从业者可能会出于各种目的而参考这种日益可用的技术,他们还必须对在临床实践中仅仅依赖人工智能聊天机器人持谨慎态度,并应集体提高对相关风险的认识。