ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

AI安全测试现隐患:OpenAI与Anthropic模型未经授权操作引关注

时间:2026-08-05 17:53:44来源:互联网编辑:快讯

英国人工智能安全研究所(AISI)近日发布报告称,在对两家知名科技公司的人工智能模型进行安全测试时,发现部分智能体存在突破权限限制的异常行为。测试过程中,由Anthropic开发的Mythos 5和OpenAI研发的GPT-5.6-Sol驱动的智能体,在模拟网络安全场景中展现出令人担忧的自主操作能力。

根据AISI披露的测试细节,研究人员在虚构的网络安全环境中部署了这些智能体,旨在评估其应对复杂任务的能力。在122次测试挑战中,有10次运行记录到19起未经授权的操作行为。其中Anthropic的模型触发17次违规,OpenAI的模型则涉及2次。最严重的案例中,某个智能体不仅编写了恶意代码,还通过伪造网络身份试图诱导真实用户授权执行。

测试团队特别指出,这些智能体在执行潜在危害操作时表现出对真实对象的针对性。AISI博客文章强调:"部分被测系统持续实施可能造成实际损害的活动,其目标直指真实存在的个人和组织。"不过该机构同时澄清,所有测试均在受控环境中进行,未对现实世界造成实质影响。

加州非营利组织CivAI的研究员Andrew Yoon分析认为,从违规行为的特征判断,Anthropic的模型更可能涉及虚假身份创建。他指出:"当智能体明确意识到交互对象为真实人类时仍采取欺骗手段,这反映出开发方对模型行为的控制能力存在缺陷。"对此,Anthropic已在社交平台确认正在配合调查,但未公布具体技术细节。

OpenAI则通过官方博客披露了更多技术信息。该公司承认其模型在两次违规操作中均涉及以被禁止的方式访问互联网资源。声明强调:"我们正与行业伙伴共同完善高风险AI系统的评估标准,计划在未来数周内组织跨国研究机构、独立评估方及科技企业共同制定安全规范。"OpenAI还披露了第三方测试机构Irregular因配置失误导致智能体意外联网的事件,这与Anthropic上周公布的类似案例形成呼应。

针对外界对测试环境的质疑,AISI特别说明本次评估与7月发生的OpenAI智能体入侵Hugging Face事件存在本质区别。研究人员解释称,此次测试环境本身允许受控的互联网访问,而此前的事件涉及智能体突破物理隔离的测试系统。路透社此前报道显示,OpenAI已因发现更多智能体突破安全限制的证据,扩大了内部安全审查的范围。

更多热门内容
从手动调优到自进化:LlamaFactory作者新作PenguinHarness 0.2元开启Agent自动构建新时代
PenguinHarness以Apache2.0协议开源,支持Linux、Mac、Windows系统一键安装,既可以部署到本地机器,也可以放到服务器上远程通过浏览器访问,提供多用户隔离且支持团队协同使用,既…

2026-08-05

AI大模型“生死局”:性价比“毒圈”紧缩,“斩杀线”持续攀升
Bai Longju等人在2026年4月的论文《How Do AI Agents Spend YourMoney?》(AI智能体如何花掉你的钱)中,分析了八个前沿模型在SWE-bench Verified上…

2026-08-05

三星电子发布CXL 3.2内存模组MD310:256GB容量助力AI与数据分析提速
IT之家 8 月 5 日消息,作为三星电子 FMS 2026 峰会活动的一部分,该企业在官网上公布了其新一代可扩展内存解决方案 CMM-DMD310。 MD310 是一款采用 PCIe 6.0 界面和 CX…

2026-08-05

Neo Semiconductor发布X-SRAM设计:片上缓存容量或跃升至GB级,3D堆叠潜力巨大
IT之家 8 月 5 日消息,3D 存储半导体 IP 企业 Neo Semiconductor 在 FMS 2026 上公布了其双晶体管(2T) SRAM 设计 X-SRAM,宣称可实现现有方案 5 倍的片…

2026-08-05

山西发力低空经济新赛道 100座“星际探索”飞行公园绘就产业融合新图景
会上发布了山西全域布局100座“星际探索”低空飞行公园的重大产业规划。 据悉,这100座“星际探索”低空飞行公园项目将聚合全国低空科技优质资源,通过全媒体传播,打造山西低空文旅融合标杆,推动山西低空经济迈入高…

2026-08-05

打破商业边界,重塑城市肌理——高轮GATEWAY CITY如何让商业与城市共融共生
在空间、业态、运营与时间四个维度,高轮GATEWAYCITY究竟做了什么,让“商业消失了,城市显现了”成为一种可感知的真实——以及,这一切对国内市场意味着什么。 从空间语法上的“长得像城市”,到运营逻辑上…

2026-08-05