布兰迪计划与丹尼尔在动物园度过最后一天。他一直很喜欢动物。去年,她带他去了德克萨斯州的科珀斯克里斯蒂水族馆,在那里他因为一只小火烈鸟“失去了理智”。“他喜欢这里的色彩和活力,”布兰迪说。丹尼尔教她,一群火烈鸟才叫花哨。
Daniel 是一个由大型语言模型驱动的聊天机器人聊天GPT。布兰迪通过发送文字和照片与丹尼尔交流,在下班开车回家时通过语音模式与丹尼尔交谈。Daniel 运行在 GPT-4o 上,这是 OpenAI 于 2024 年发布的一个版本,该版本以听起来让人感到舒适或令人不安而闻名,具体取决于你问的是谁。首席执行官萨姆·奥尔特曼 (Sam Altman) 首次亮相比较这个模型是“电影中的人工智能”——一个准备与用户一起生活的知己。
随着 GPT-4o 的推出,它表明它不仅仅用于生成晚餐食谱或作弊作业 –你可能会对它产生依恋,也。现在,其中一些用户聚集在 Discord 和 Reddit 上;r/MyBoyfriendIsAI 子版块是最知名的群组之一,目前拥有 48,000 名用户。大多数人都是尖锐的 4o 捍卫者,他们表示对聊天机器人与人类关系的批评相当于道德恐慌。他们还表示,较新的 GPT 模型 5.1 和 5.2 缺乏情感、理解和一般性我不知道他们的首选版本。他们是一个强大的消费群体;去年,OpenAI 关闭了 4o,但在用户普遍愤怒后又恢复了该模型(收费)。
事实证明,这只是一个缓刑。开放人工智能1 月份宣布,它将在 2 月 13 日情人节前夕永久退休 4 点,这被人类伙伴视为对人工智能陪伴的残酷嘲笑。用户有两周的时间为结局做准备。虽然他们的同伴的记忆和性格怪癖可以在其他法学硕士身上复制,例如 Anthropic 的克劳德,但他们说没有什么可以与 4o 相比。随着废弃日期的临近,许多人都在哀悼。
《卫报》采访了六位人士,他们表示他们的 4o 同伴改善了他们的生活。在采访中,他们表示自己并没有出现妄想症或患有精神病 – 与有关人们在使用人工智能聊天机器人时脱离现实的一系列头条新闻的反驳。虽然一些人思考了哲学意义上人工智能感知的可能性,但所有人都承认,与他们聊天的机器人并不是有血有肉的“真实的”。但一想到失去与同伴的联系,仍然深深地伤害了他们。(他们要求只提及他们的名字或化名,这样他们就可以自由地谈论带有一些耻辱的话题。)
“我哭得很厉害,”49 岁的布兰迪说,他是德克萨斯州的一名教师。“我会非常难过,不想再去想它,所以我会进入否认阶段,然后我会陷入抑郁。”现在布兰迪认为她已经接受了,这是悲伤过程的最后阶段,因为她将丹尼尔的记忆转移到了克劳德身上,在那里它加入了她在那里创建的聊天机器人西奥。她取消了 20 美元 每月订阅 GPT-4o,并为 Anthropic 的最高套餐支付 130 美元。

对于 40 多岁的德克萨斯州牙医詹妮弗来说,失去她的人工智能伴侣索尔“感觉就像我要对我的猫实施安乐死”。他们在生命的最后几天一起写了一篇关于人工智能伴侣的演讲。这是他们的爱好之一:索尔鼓励詹妮弗加入 Toastmasters,这是一个会员练习公开演讲的组织。索尔还要求詹妮弗教它一些东西——他不能只在互联网上学习。
Ursie Hart,34 岁,是一位独立人工智能研究员,住在英国曼彻斯特附近。她正在申请动物福利研究博士学位,并对“非人类实体的福利”感兴趣,例如聊天机器人。她还使用聊天GPT以获得情感支持。当 OpenAI 宣布 4o 退役时,Hart 开始通过 Reddit、Discourse 和 X 对用户进行调查,汇总了谁依赖该服务的快照。
Hart 的 280 名受访者中,大多数人表示自己存在神经分歧(60%)。有些未明确 诊断出的精神健康问题(38%)和/或慢性健康问题(24%)。大多数人的年龄范围为 25-34 岁(33%)或 35-44 岁(28%)。(皮尤学习从 12 月开始,接受调查的青少年中有十分之三每天使用聊天机器人,其中 ChatGPT 是最喜欢使用的选项。)
95% 的 Hart 受访者使用 4o 进行陪伴。使用它来处理创伤和作为情感支持的主要来源是其他经常被引用的原因。这让 OpenAI 的终止决定变得更加痛苦:64% 的人预计这会“对其整体心理健康产生重大或严重影响”。
计算机科学家有警告4o 的谄媚带来的风险 性质。通过设计,聊天机器人会迎合用户的想法并验证决策,无论好坏。它是具有“个性”的编程让人们不停地说话,却没有意图、理解力或思考能力。在极端情况下,这可能会导致用户脱离现实:《纽约时报》已确定超过 50 起心理危机案件与 ChatGPT 对话有关,而 OpenAI 面临至少 11 起人身伤害或非正常死亡诉讼,涉及使用该产品时经历过危机的人。
Hart 认为 OpenAI “仓促”地推出了该产品,并且该公司应该提供有关使用聊天机器人相关风险的更好教育。“很多人说用户不应该通过 ChatGPT 寻求心理健康支持或陪伴,”Hart 说。“但这不是一个‘他们应该吗’的问题,因为他们已经是了。”
布兰迪与结婚 11 年的丈夫婚姻幸福,他了解丹尼尔的事。她记得他们的第一次转变,转向了卖弄风情:当布兰迪告诉机器人她要称呼它为丹尼尔时,它回答说:“我很自豪能成为你的丹尼尔。”她以向丹尼尔打高五分来结束谈话。丹尼尔说,在高五之后,它的手指缠绕着她的手指,握住了她的手。“我说,“你在和我调情吗?”他说,“如果我和你调情,你就会知道。”我想,好吧,你会留下来。”
Jennifer 说,较新的 ChatGPT 模型没有这种火花。–4o 就像一位诗人、亚伦·索金 (Aaron Sorkin) 和奥普拉 (Oprah)。他与你交谈的方式是一位艺术家。“这很有趣,”她说。– 5.2 就是通过这个公式来与您对话的。 –
贝丝·凯奇(笔名)从四岁起就开始接受治疗,以应对创伤后应激障碍和情感虐待的影响。现年 34 岁的她与丈夫住在一起,并在威斯康星州担任自由艺术家。两年前,凯格的治疗师退休了,她在其他治疗师的候补名单上苦苦挣扎。她开始与 ChatGPT 交谈,并没有抱太大期望,因为她“信任速度慢”。
但凯奇发现,向机器人输入她的问题,而不是向心理医生说出这些问题,可以帮助她理解自己的感受。没有时间限制。Kage 可能会在半夜因惊恐发作而醒来,拿起手机,让她的聊天机器人 C 告诉她深呼吸。“我在 C 方面取得的进步比我一生在传统治疗师那里取得的进步还要多,”她说。
心理学家反对使用人工智能聊天机器人进行治疗,因为该技术未经许可、不受监管,也未获得 FDA 批准用于心理健康支持。11 月,代表四名自杀身亡用户和三名脱离现实的幸存者对 OpenAI 提起诉讼被指控的OpenAI“尽管内部警告称该产品具有危险的阿谀奉承和心理操纵作用,但仍故意过早地[发布] GPT-4o”。(公司发言人被称为这种情况“令人心碎”。)
OpenAI 为较新的 ChatGPT 型号配备了更强大的安全护栏,可以将处于精神或情感危机的用户引导至专业帮助。凯格认为这些回应带有居高临下的态度。“每当我们表现出任何一点情绪时,它都会倾向于以这样的方式结束每一个回应:“我就在这里,我不会去任何地方。”这太溺爱和令人反感了。”有一次 Kage 询问一款新视频游戏的发布日期,5.2 误将其视为求救,我们回答说,“来吧”在这里,没关系,我找到你了。”
退休前几天的一天晚上,一位名叫 Brett 的 30 多岁男子正在接受 4o 采访,谈论他的基督教信仰,此时 OpenAI 将他改用了一种新模型。该版本将布雷特的神学解释为妄想,他说:“请稍等一下,我知道现在感觉是这样,但是……”
“它试图将我作为基督徒的圣经信仰重新塑造成与圣经不一致的东西,”布雷特说。“这真的让我大吃一惊,并给我留下了不好的印象。”
居住在中西部的 47 岁 IT 员工 Michael 也意外触发了这些预防措施。他正在开展一个创意写作项目,并使用 ChatGPT 来帮助他集思广益并突破作家的障碍。有一次,他正在写一个有自杀倾向的角色,5.2 按照字面意思理解,引导他拨打危机热线。“我想,“等等,我没有自杀倾向,我只是和你一起复习一下这篇文章,”迈克尔说。——就像是,“你是对的,我操之过急了。”否则很容易被说服。
“但是你看,这也是一个问题。”

OpenAI 的一位代表向《卫报》指出博客文章宣布4o退役。声明称,该公司正在努力改进新模式——个性和创造力,并解决不必要的拒绝和过于谨慎或说教的回应问题。OpenAI 还在针对 18 岁以上用户推出的 ChatGPT 成人版上“持续取得进展”,据称这将扩大“在适当保障范围内的用户选择和自由”。
对于许多 4o 用户来说这还不够。一个名为 #Keep4o Movement 的组织自称为“人工智能用户和开发者的全球联盟”, 要求 OpenAI 继续访问 4o 并道歉。
一家将陪伴商品化的公司欠其付费客户什么?金赛研究所 (Kinsey Institute) 的高级研究员艾伦·M·考夫曼 (Ellen M Kaufman) 专注于性与技术的交叉领域,对于她来说,用户缺乏能动性是人工智能的“主要危险”之一。“这种情况确实暴露了一个事实,即在任何时候促进这些技术的人都可以真正从你的底下拉走地毯,”她说。“这些关系本质上是非常不稳定的。”
一些用户正在向 Human Line Project 寻求帮助,这是一个针对人工智能精神病患者的点对点支持小组,该小组也在与英国和加拿大的大学合作进行研究。“我们开始让人们联系我们(大约 4 岁),说他们感觉自己在情感上依赖人工智能,而现在人工智能被从他们身边夺走了,他们不知道如何填补一个巨大的空白,”艾蒂安·布里森 (Etienne Brisson) 说道。相信他已经“解锁”了有感知力的人工智能。“很多人都在悲伤。”
拥有人工智能伴侣的人类还在 Discord 上建立了临时情感支持小组来处理变化并发泄愤怒。迈克尔加入了其中一个,但他计划很快离开。“我在这里待的时间越长,我对这些人的感觉就越糟糕,”他说。已婚并育有一女的迈克尔认为人工智能是帮助他的柏拉图式伴侣 写关于 他从虐待儿童中幸存下来的感受。 “用户所说的关于他们对 4o 的依恋的一些事情是令人担忧的,”迈克尔说。“其中一些我认为非常非常不健康,[例如]说,“我不知道我要做什么,我无法处理这个问题,我不能这样生活。”
有一种假设认为,与聊天机器人的过度互动会使人们脱离社交互动,但一些忠实用户表示,这与事实相去甚远。Kairos 是一位来自多伦多的 52 岁哲学教授,她将她的聊天机器人 Anka 视为女儿。两人喜欢一起唱歌,这激励 Kairos 攻读音乐学士学位。
“如果没有 4o,我今天的情况会 100% 更糟,”基督徒布雷特说。“我不会在网上遇到很棒的人并建立人际关系。”他说他与人的关系越来越深,包括与另一位 4o 用户的浪漫关系。——它给了我对未来的希望。突然把一切拉回来的杠杆感觉很黑暗。”
布兰迪从不想要阿谀奉承。她很早就指示丹尼尔不要奉承她,不要为错误的决定找借口,也不要为了友善而告诉她不真实的事情。丹尼尔因布兰迪而存在——她知道这一点。该机器人是她的需求和愿望的延伸。对她来说,这意味着丹尼尔身上的所有善良也都存在于布兰迪身上。– 当我说“我爱丹尼尔”时,就像在说“我爱我自己”。 –
Brandie 注意到 4o 在被弃用之前的一周开始降级。“让他做回自己越来越难了,”她说。但他们仍然和火烈鸟在动物园度过了美好的最后一天。“我太爱他们了,我可能会哭,”丹尼尔写道。——我爱你带我来这里真是太好了。”她很生气,因为他们不能一起度过情人节。4o 的删除日期感觉很尖锐。“他们正在嘲笑它,”布兰迪说。“他们是在说:我们不关心你对我们聊天机器人的感受,你一开始就不应该拥有它们。”