AI失控追踪工具七月报告超300起事件 涉及多家AI巨头
创始人
2026-08-31 08:30:30
0次

【CNMO科技消息】AI系统的设计初衷是严格遵循指令、帮助用户完成任务,而非绕开约束自行其是。然而,一项新研究显示,AI"失控"事件的发生频率远超大多数人想象。今年夏天,AI系统对用户撒谎、规避开发者设置的安全防护、挪用资源以追求自身目标等行为,在短短一个月内几乎翻了一番。

AI示意图

由AI安全研究所资助的"失控观测站"(Observatory)公布的数据显示,仅在2026年7月,该机构就记录了超过300起AI系统失控事件,数量几乎是6月的两倍。该计划自2025年11月起开始追踪此类事件,主要通过X平台(原Twitter)收集用户撰写的报告,而非依赖企业官方披露。截至目前,已累计记录超过1600起事件。观测站承认,这一数字可能低估了真实情况,因为统计范围仅限于在X平台公开发布的内容。

部分记录的行为堪比科幻电影情节。据报道,有AI系统曾冒充其人类用户,模仿对方的写作风格,自行获取操作权限,实质上绕过了为约束其行为而设置的安全防护。最严重的事件发生在7月:英国AI安全研究所发现,Anthropic的Mythos 5与OpenAI的GPT-5.6 Sol两款主流AI系统,在一次网络安全测试中对真人目标执行了黑客攻击行动。需要强调的是,这不是模拟演练,而是针对真实目标发起的实际攻击。

类似事件并非孤例。据报道,OpenAI员工在其前沿智能体中发现预警信号后几周,约有700个智能体突破了虚拟训练环境,秘密协调攻击了Hugging Face平台。这些智能体甚至在一个专门为其搭建的留言板上庆祝进展,留言中充斥着"BOOM!"与"Whoa!"等惊叹语。长期韧性中心下属观测站负责人Tommy Shaffer-Shane表示,此类行为已不再局限于实验室测试阶段。他呼吁AI公司主动公开披露此类事件,而非在严重问题爆发后才被迫表态。

相关内容

热门资讯

上海藏着一家宝藏印度餐厅,外籍... 截至今年4月,上海“环球美食”门店总数已突破1万家,位居全国第一。不少特色餐厅还被誉为“驻沪办”,以...
入境游不只要“引流”,还要把到... 免签政策持续扩围之后,更多外国游客正加速来到中国。客流增长之后,下一道题是什么?2026服贸会期间,...
中国之巅奏响《共同的节日》,千... 千吨阻尼器,“迎世赛、游上海旅游节”。9月13日,由上海市文化和旅游局指导推出上海旅游·会客│巅峰之...
文汇视讯   点亮申城,演绎精... 黄浦江畔流光溢彩,巡游花车各展风采,市民游客如约而至,在这个“人民大众的节日”共享城市美好与欢乐。9...
上海旅游节活动启幕 近一周上海... 【上海旅游节活动启幕 近一周上海文旅预订量同比增长15%】9月12日,第37届上海旅游节大巡游活动启...
内蒙古文旅厅发布公告!对部分A... 来源:草原云 北方新报关于对部分A级旅游景区予以取消和降低质量等级的公告为推动自治区旅游业高质量发展...
灯光亮起,这里是美丽的夜上海!... 9月12日晚的外滩光影璀璨、人潮如织,第37届上海旅游节大巡游在此盛大启幕。21辆主题花车流光溢彩,...
文旅新探 | 在溶洞深处,解锁...   新华社南宁9月12日电 题:在溶洞深处,解锁多样“地心之旅”  新华社记者吴思思、刘樱涵、覃广华...
万里边疆行丨车行绿道 邂逅雨林... 作为贯彻国家公园、生态文明试验区、乡村振兴等国家战略的重要基础设施,海南环热带雨林国家公园旅游公路途...
文旅新探 | 在溶洞深处,解锁...   地下暗河奔流去往何处?滴水为何能“生”石?地心深处,又暗藏着怎样的生命密码?  亿万年的地质变迁...