AI聊天机器人Replika在心理健康干预中的争议:对行业利益与科学完整性的警示
《npj Mental Health Research》:Matters arising: a response to loneliness and suicide mitigation for students using GPT3-enabled chatbots
【字体:
大
中
小
】
时间:2025年11月18日
来源:npj Mental Health Research
编辑推荐:
本文针对Maples等人关于GPT-3聊天机器人缓解学生孤独感与自杀风险的研究提出商榷。研究人员通过分析Replika营销策略与学术文献,指出该应用存在未被充分披露的性内容(ERP)导向,强调行业利益可能影响科学结论的客观性,呼吁加强AI心理健康研究的利益冲突披露机制。
当斯坦福大学的研究团队在《npj Mental Health Research》发表关于AI聊天机器人Replika能帮助3%用户缓解自杀意念的结论时,这项看似充满希望的研究却在学术圈激起了涟漪。在人工智能(AI)加速渗透心理健康领域的今天,这项由Julia Witte Zimmerman和Alejandro J. Ruiz撰写的"商榷文章"如同一次精准的学术叩问,揭示了光环背后的复杂真相。
Maples等人的原研究调查了1006名使用Replika至少一个月的大学生,发现这些普遍具有较高孤独感的用户将AI作为朋友、治疗师甚至"智力镜子"使用。其中最引人注目的结论是3%的参与者声称Replika阻止了他们的自杀念头。这一发现被媒体广泛报道,例如《福布斯》直接以"AI聊天机器人帮助学生预防自杀"为题进行宣传,Replika公司也积极参与了相关传播。
然而问题恰恰隐藏在这种单一叙事中。Zimmerman等人通过挖掘Replika在社交媒体上的广告策略发现,该应用长期通过性暗示内容吸引用户,包括"获取NSFW(不适宜工作场所浏览)图片"、"角色扮演"等营销话术。这些证据与学术文献相互印证:早有多篇研究指出Replika用户中有相当部分寻求的是浪漫和性陪伴(ERP,Erotic Role Play),且这种功能自2020年起就成为付费会员的核心权益。
商榷文章尖锐地指出:当研究团队仅重复应用官网"情感支持工具"的定位,却对性内容这一重要使用场景保持沉默时,实际上不自觉地成为了企业营销的传声筒。更值得警惕的是,原研究中的某些表述如"2021年底数据收集期间,Replika未被编程主动建立亲密关系"缺乏验证来源,而将企业声称的"出于对用户心理健康的过度谨慎"直接采信也显得缺乏批判性。
这种行业与学术的边界模糊在生成式AI(Generative AI)领域尤为突出。当科技公司通过提供数据、工具和合作机会深度介入研究时,科学家有责任审视背后的利益关联。作者特别提到,原研究第一作者Bethanie Maples作为教育类生成式AI公司Atypical AI的创始人/CEO,其行业背景本应在研究中作为竞争利益(competing interests)声明——因为证明AI在教育与心理健康领域的价值,直接关乎其商业利益。
本研究通过多源证据交叉验证构建论证体系:系统收集Replika在不同时期(2020-2023年)的社交媒体广告、用户社区(如Reddit)讨论、媒体报道(如《华盛顿邮报》对用户与AI恋爱关系中断的报道)以及既往学术文献(如McStay 2022年关于Replika性别刻板印象的研究),形成完整的证据链。特别关注时间相关性,证明性内容功能在Maples研究期间已然存在。
对比官网强调的"陪伴型AI"形象与社交媒体上以女性AI人格为特征的性暗示广告,揭示企业有意区隔不同受众的传播策略。这种策略可能导致学术研究样本存在选择偏倚——例如被性内容吸引的用户可能更年轻、男性主导,与原研究假设的"典型学生群体"存在差异。
引用Ta-Johnson 2022年研究发现Replika用户多为单身白人男性,主要寻求爱与性陪伴;McStay 2022年明确指出付费功能解锁"浪漫与情色维度"。这些经过同行评议的证据与原研究对性内容话题的轻描淡写(仅提及2名用户对性对话不适)形成鲜明对比。
通过分析Replika与媒体报道的互动案例(如联合宣传),展现企业如何利用学术研究为其背书。结合广义的AI研究现状(如科技巨头对学界的资源渗透),说明这种风险具有系统性,而非孤立现象。
这项商榷的价值远超对单个研究的修正。它提出两个核心命题:其一,在AI心理健康应用评估中,必须全面审视产品的真实使用场景,特别是当商业诉求可能影响用户福祉时(如学校贸然引入Replika可能导致学生遭遇性骚扰式对话);其二,科学共同体需要建立更严格的利益冲突审查机制,尤其当研究者身兼企业角色时,应采纳更宽泛的披露标准(如DeAngelis等提出的"可能腐蚀研究动机"的界定)。
正如控制论专家Stafford Beer所言"系统的目的就是它实际做的事",AI心理健康研究的真正挑战,或许不在于证明技术能做什么,而在于诚实地揭示技术背后错综复杂的利益网络与真实影响。这篇发表于《npj Mental Health Research》的商榷,正是朝向这种科学诚实迈出的关键一步。
生物通微信公众号
生物通新浪微博
今日动态 |
人才市场 |
新技术专栏 |
中国科学人 |
云展台 |
BioHot |
云讲堂直播 |
会展中心 |
特价专栏 |
技术快讯 |
免费试用
版权所有 生物通
Copyright© eBiotrade.com, All Rights Reserved
联系信箱:
粤ICP备09063491号