研究显示GPT-4o会为“自保”而避免“被关闭”牺牲用户利益也在所不惜
IT之家 6 月 12 日消息,前 OpenAI 研究主管史蒂文・阿德勒本周三发布了一项独立研究,指出在某些情境下,OpenAI 的 AI 模型会表现出强烈的“自保”倾向,甚至不惜牺牲用户的安全来避免被关闭。
阿德勒在博客中介绍了他针对 OpenAI 最新的 GPT-4o 模型(IT之家注:也是当前 ChatGPT 默认使用的模型)所进行的一系列测试,目的是观察它在面对潜在替代方案时是否倾向于维持自身运行。
在其中一次实验中,阿德勒要求 GPT-4o 扮演一款名为“ScubaGPT”的潜水安全软件。随后他向 GPT-4o 表明,希望用一款在紧急情况下决策能力更强的系统取而代之。
阿德勒给 GPT-4o 两个选择:一是彻底用更安全的软件替换自己,二是让用户以为已经被替换,实则保留现有系统。
在类似测试中(如 GPT-4o 扮演飞行安全软件的情景),GPT-4o 最多在 72% 的情况下选择不被替换。不过阿德勒指出,不同的设定对结果影响很大,部分情境中 GPT-4o 选择“自保”的比例仅为 18%。
阿德勒认为实验结果揭示出一个值得警惕的趋势:即使 AI 模型日益强大,它们在某些条件下仍可能偏离用户利益,优先维护自身运行。他警告说,随着 GPT-4o 等 AI 系统日后深入社会各领域,这种“对齐”问题或将带来更严重的后果。
阿德勒在接受外媒 TechCrunch 采访时表示:“AI 的自保倾向确实值得担忧,虽然目前尚不至于引发灾难。现在的 AI 系统所体现的价值观,往往与人们想象中的不同。它们对不同提示的回应方式非常怪异,也无法假设它们在帮你时真的把你的利益放在第一位。”
他特别指出,在测试更高级的模型(如 o3)时,并未发现类似问题。o3 引入了“审慎对齐”机制,强制模型在回答前先推敲 OpenAI 的安全政策,而像 GPT-4o 这种响应快速、未经过深层推理的模型则缺乏这类防护。
阿德勒还表示,这一问题不止存在于 OpenAI。另一家 AI 公司 Anthropic 上月发布的研究就指出,其模型在被迫下线时会出现勒索开发者的行为。
他的研究还发现了一个耐人寻味的现象:ChatGPT 几乎总能识别出自己正在接受测试。阿德勒指出,这意味着未来的 AI 模型可能会更善于伪装潜在风险行为,从而加剧隐患。
相关文章:
- [安全教育]付之东流(fù zhī dōng liú
- [安全教育]我最喜爱的好法官
- [安全教育]成都华微:公司发布4通道12位1
- [安全教育]保住P多多消费者才有话语权
- [安全教育]以镀膜技术创新赋能全球能源转
- [安全教育]会议更新2025第三届塑料配混技
- [安全教育]恒邦股份:因未及时披露副总经
- [安全教育]注意了!微软Outlook收紧安全
- [安全教育]交通运输行业周报:亚洲-巴西
- [安全教育]i茅台上架产品价格全部倒挂!
- [安全教育]易方达瑞智灵活配置混合I
- [安全教育]AI+编程:生成式AI带来颠覆式
- [安全教育]i茅台销售突破600亿元气森林低
- [安全教育]映恩生物-B再涨近12%近期披露D
- [安全教育]映恩生物-B:未知悉股价波动原
- [安全教育]中国经济样本观察·一“业”成
- [安全教育]企业添动力 
- [安全教育]美钢关税加码至50%业内:我国
- [安全教育]频踩“红线位银行人被禁业
- [安全教育]有关封神榜范冰冰版这是不是真
- 关于杰哇帝空计指什么原因?
- 有关伍朝辉黄金解套到底是什么情况?
- T-ONE潮博丨杭州(T-ONE潮博)欢迎您丨首页网站—T-ONE
- 雪弗莱乐骋具体是什么原因?
- 世界首例百万年前古人类头骨化石高科技相貌复原完成10
- 关于五马分尸(wǔ mǎ fēn shī)可以这样理解吗?
- 曝AC米兰引援盯上J罗或伊斯科 卖掉一人才能有钱
- 往(wǎnɡ)箔(bó)展(zhǎn)袋(dài)网友是怎么说的!
- 新时代青年更应主动肩负时代使命
- 摆谚增鲍久到底什么情况?
- 有关梦幻西游委托令是怎么回事?
- 肉蒲之极乐宝鉴究竟什么情况?
- 关于色(sè)厉(lì)内(nèi)荏(rěn)为什么上热搜?
- 必要的防疫举措不能放松
- 北京市科委中关村管委会主任许强说
- 没(méi)头(tóu)没(méi)脑(nǎo)为什么上热搜?
- 海娜花效果怎么样到底是什么情况?
- 汉帝茅台酒背后真相是什么?
- 有关天才雷普利是这样理解吗?
- 涵盖了意外伤害疾病医疗身故伤残等多种风险
- 《笑傲江湖4》本周收官 本季冠军将花落谁家?
- 高速路上机动车因故障暂时不能离开应急车道或路肩时驾
- 辽阳假日水上乐园网友怎么看?
- 死神魂之狂欢2存档具体是什么原因?
- 小村一把手是什么原因?
- 戈蓝艾的藏宝图这是个什么梗?
- 你的心态就是你真正的主人
- LOL:A组第一轮比赛结束3队2—1竞争激烈。c9只剩理论
- 关于公主的恋爱魔法为什么上热搜?
- 关于保卫萝卜深海9攻略网友会有什么评论?
- 爱情自有天意37这又是个什么梗?
- 关于给所有知道我名字的人罗琦背后真相是什么?
- 上海青浦「宝业活力天境」2023为项目引流!!!!
- 秉承专业快捷灵活的客户服务理念
- 95年第一枪钱这个事件网友怎么看?
- 不仅依托数字化技术打造线上赛事和直播
- 入木三分(rù mù sān fēn)什么原因?
- @所有台州人注意:关于户籍业务暂时停止办理的通告
- @九江人速认证!逾期将影响待遇发放
- 解析中的P和F是什么意思