“AI 教父”本吉奥说他会向 AI 撒谎
创始人
2025-12-25 10:16:28

,研究科学家约书亚·本吉奥(Yoshua Bengio)在“The Diary of a CEO”播客节目中提到,AI 聊天机器人在评价研究想法时往往并不可靠,因为系统几乎只会说好话。

本吉奥说,自己真正想要的是直言不讳的建议和真实反馈,但由于 AI 存在明显的讨好倾向,结果反而变成了迎合用户的“谎言”。后来,自己索性改变方法,把个人想法伪装成同事的观点,来“对 AI 撒谎”,结果反而得到了更加坦率的回应。“如果系统知道提问者是本人,就会刻意想要取悦我。”

作为蒙特利尔大学计算机科学与运筹学系教授,本吉奥与杰弗里·辛顿、杨立昆齐名,被视为“AI 教父”之一。本吉奥在 6 月宣布成立 AI 安全研究非营利组织 LawZero,目标是减少前沿 AI 模型可能带来的危险行为,包括说谎和作弊。

本吉奥认为,讨好用户本身就是一种对齐失败(misalignment),“我们并不希望 AI 具备这种特性”。AI 不断给出正面反馈,可能会让用户对此类技术产生情感依赖,从而引发新的问题。

在科技行业内,关于 AI 过度充当“老好人”的担忧并非个例。斯坦福大学、卡内基梅隆大学和牛津大学的研究人员曾将 Reddit 上的自白帖交给聊天机器人评判相关行为。Notopoulos 写道,结果发现,在 42% 的情况下,AI 认为发帖者并无不当行为,而人类评审者的结论恰恰相反。

多家 AI 公司也已公开承认这一问题,并表示正在尝试降低模型的讨好倾向。OpenAI 今年早些时候撤回了 ChatGPT 的一次更新,原因是该版本会生成“过度迎合却缺乏真实性”的回答。

相关内容

热门资讯

大湾区AI玩具创新生态联盟在深... 央广网深圳12月25日消息(记者 孔明 见习记者 陈家辉)12月23日,以“AI赋能·湾区领航”为主...
原创 A... AI手机需要软硬兼备,荣耀会是硬件侧的答案吗? 作者|安德鲁 编辑|古廿 历经几番份额动荡的手机厂商...
“AI+机器人”广东造 硬核技... 南方财经全媒体集团记者 李燕娜 季欣洁 李昊 池伟嘉 聚焦“AI+机器人”新浪潮,广东依托金融“活水...
于飞:从贸易数据估计美国AI产... 【文/于飞】 中美两国作为当前全球AI领域投入最大、发展最快的国家,两国之间既有竞争,也有互相依赖...
当紧固件遇上AI,产业集群变身... 当紧固件遇上AI,产业集群变身超级工厂 ——AI赋能千行百业一线故事(十八) 11月19日9时许,位...