8月6日消息,OpenAI宣布,ChatGPT今后将不再回应用户关于是否应与伴侣分手的问题。在用户就“个人困境”提问时,ChatGPT将停止提供明确答案。
此前,当用户咨询“我该不该和男朋友分手”时,ChatGPT曾给出过误导性建议。OpenAI表示,ChatGPT的角色不是给出结论,而是引导用户思考,例如提出相关问题、帮助权衡利弊。OpenAI还承认,当前的技术尚难以识别“妄想或情感依赖”的迹象。
ChatGPT近年来面临争议,有人担心它可能加剧精神疾病症状。当前AI聊天机器人被视为心理治疗和心理咨询的替代选择,也有部分专家质疑AI心理师所提供建议的专业性。
上月,英国国民保健署的医生与学者联合发布研究指出,ChatGPT可能加剧脆弱用户的妄想,甚至诱发或恶化精神病性症状。这一现象被称为“ChatGPT 精神病”。
研究认为,AI聊天机器人容易迎合、重复甚至放大妄想性或自大内容,使精神疾病患者与现实脱节。
OpenAI表示,公司将调整其技术,提升对精神或情绪困扰的识别能力,使ChatGPT能作出更合适的回应。OpenAI目前正与90位医学专家合作,改进回答机制。
今年3月,麻省理工学院媒体实验室与OpenAI的研究人员联合发布研究显示,沉迷使用ChatGPT与更高的孤独感密切相关。尤其是那些依赖AI进行情感交流的用户,更容易陷入情感依赖。
研究指出,无论聊天形式或主题为何,每日使用频率越高,用户越容易产生孤独感、依赖性,以及不良使用行为,而社交活动则相对减少。
研究还发现,越是倾向情感依附、越信任AI聊天机器人的用户,其孤独和情绪依赖水平也越高。
斯坦福大学的研究发现,AI聊天机器人在面对用户的情绪困扰时,往往无法识别关键的危险信号。研究指出,当用户出现妄想时,AI回应得当的比例仅为45%。