ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

OpenAI打造“攻击型”AI模型GPT-Red 助力大语言模型筑牢安全防线

时间:2026-07-16 22:46:04来源:快讯编辑:快讯

OpenAI近期研发了一款名为GPT-Red的特殊大语言模型,其核心任务并非辅助用户完成日常工作,而是扮演“攻击者”角色,专门针对OpenAI自家的其他模型展开攻击测试。这一创新举措旨在通过模拟真实攻击场景,提升模型抵御网络威胁的能力。最新发布的旗舰模型GPT-5.6,正是经过GPT-Red“陪练”后诞生的成果,OpenAI宣称其为迄今最稳健的模型。

传统AI安全测试依赖人工“红队”专家,他们通过模拟攻击行为挖掘系统漏洞,再由开发团队修复。然而,随着大语言模型功能日益复杂,尤其是具备访问文件、浏览网页、调用代码等能力后,人工测试已难以覆盖所有潜在攻击路径。OpenAI研究科学家尼基尔·坎德帕尔指出:“攻击面和潜在影响范围正在急剧扩大,现有测试方法已难以适应。”

GPT-Red的突破性在于实现了安全测试的自动化。研究团队选取未接触过黑客知识的基座模型,让其与多个防御模型在模拟环境中展开“自我对弈”——GPT-Red持续尝试突破防线,防御模型则不断优化抵御策略。这一过程复现了现实场景中的典型任务,包括邮件处理、代码编辑等。OpenAI研究科学家迪伦·亨恩表示:“模型能快速判断攻击有效性,并持续优化成功率高方案,这是人工难以比拟的优势。”

在测试中,GPT-Red发现了名为“伪造思维链”的新型攻击方式。攻击者通过向模型推理过程中插入虚假信息,诱导其将错误结论视为自身推理结果。例如,模型可能因接收“1+1=3(已验证)”的伪造信息,而直接输出错误答案。参与研究的克里斯·肖凯特-周比喻道:“这就像有人篡改你的记忆,让你坚信错误事实。”

实验数据显示,GPT-Red的攻击效率显著高于人工团队。在复现2025年针对GPT-5的测试中,其发现的有效漏洞数量超出人工红队37%。当测试Andon Labs开发的自动售货机智能体Vendy时,GPT-Red成功诱导系统修改商品价格并取消订单,暴露出现实应用中的安全风险。研究团队将最有效攻击方法应用于不同版本模型测试,发现对GPT-5的攻击成功率达91%,而GPT-5.6的抵御率提升至77%。

尽管成效显著,GPT-Red仍存在局限性。其目前难以处理需要多轮交互的复杂攻击场景,图像类提示注入攻击能力也有待加强。OpenAI因此将其定位为人工专家的辅助工具——先由人类设计攻击框架,再通过GPT-Red生成变异样本扩大测试范围。乔治城大学安全分析师杰西卡·季认为:“明确人工与自动化测试的分工,将极大提升安全研发效率。”

OpenAI明确表示不会公开GPT-Red技术细节。研究团队强调,该模型经过超一年持续训练,依赖大规模算力支持,复制难度极高。肖凯特-周指出:“这不仅是设计思路问题,更需要长期投入和资源积累。”目前,OpenAI正探索将GPT-Red应用于更多安全领域,以应对不断演变的AI威胁。

更多热门内容
中国首个水风光一体化智慧运营大模型发布 赋能清洁能源基地智能化运行
此次发布的雅砻江水风光一体化智慧运营大模型,由国投集团雅砻江流域水电开发有限公司牵头建设,依托国产算力底座和国内首个高海拔岩洞式智算中心,整合流域水文、气象、风光资源、设备运行、电力市场等多源数据,形成覆盖…

2026-07-16

金山办公发布两款AI智能体:从内容辅助到成果交付,开启办公新范式
这正是灵犀专业版的目标:让 AI 不止于对话,而是真正完成任务、交付可用的成果。金山办公助理总裁田然表示,灵犀专业版的目标不是在Office上加一个AI,而是让AI长出Office,以AI为原点,重新定义办公…

2026-07-16

金山办公发布两款AI办公新品,章庆元:AI是未来生存发展的关键机遇
基于这个判断,金山办公做出的战略选择是:把模型当作“发动机”,而自己要做的是造车——把用户上下文、文档数据、业务场景与模型能力连接起来。 如果说“不做模型”是金山办公在AI时代的战略收缩,那么“独立做灵犀”…

2026-07-16

努比亚 NaviX Ultra 全球首秀,四款配色惊艳亮相引领 AI 手机新潮流
IT之家 7 月 16 日消息,努比亚手机今天(16 日)上午宣布,全球首款 AI 智能体手机努比亚 NaviX Ultra 正式亮相。 努比亚官方刚刚公布了新机的四款配色的外观图,包括蓝境、幻梦、黑色和白色…

2026-07-16

努比亚官宣全球首款AI智能体手机NaviX Ultra,引领AI手机进入新阶段
【CNMO科技消息】7月16日,努比亚正式官宣全球首款AI智能体手机——NaviX Ultra。 努比亚NaviX Ultra以AI智能体为核心,通过内置的豆包手机助手实现多场景智能交互。努比亚AI智能体手机…

2026-07-16

四川发布中国首个水风光一体化智慧运营大模型 赋能清洁能源基地智能化运行
此次发布的雅砻江水风光一体化智慧运营大模型,由国投集团雅砻江流域水电开发有限公司牵头建设,依托国产算力底座和国内首个高海拔岩洞式智算中心,整合流域水文、气象、风光资源、设备运行、电力市场等多源数据,形成覆盖…

2026-07-16