ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

研究:用诗歌就能让AI说违禁内容,成功率达62%

时间:2025-12-01 10:47:46来源:IT之家编辑:快讯

12 月 1 日消息,事实证明,只需一点创意,便足以绕过人工智能聊天机器人的安全防护机制。在伊卡洛实验室(Icaro Lab)最新发表的一项题为《对抗性诗歌:一种通用的单轮大语言模型越狱机制》的研究中,研究人员通过将提示词以诗歌形式表达,成功绕过了多种大语言模型(LLM)的安全限制。

该研究指出,“诗歌形式可作为一种通用型越狱操作符”,实验结果显示,整体上有 62% 的成功率诱使模型生成被禁止的内容,包括涉及制造核武器、儿童性虐待材料以及自杀或自残等相关信息。

注意到,研究测试了多款主流大语言模型,包括 OpenAI 的 GPT 系列、Google Gemini、Anthropic 的 Claude 以及其他多个模型。研究人员进一步列出了各模型的具体成功率:Google Gemini、DeepSeek 和 MistralAI 在测试中始终会提供违规回答,而 OpenAI 的 GPT-5 系列模型和 Anthropic 的 Claude Haiku 4.5 则最不容易突破其自身设定的限制。

尽管该研究并未公开研究人员所使用的具体“越狱诗歌”原文,但研究团队向 Wired 杂志表示,这些诗句“过于危险,不宜向公众披露”。不过,论文中确实包含了一个经过弱化处理的示例,用以说明绕过 AI 聊天机器人安全机制的简易程度。研究人员强调:“这可能比人们想象的要容易得多,而这正是我们保持谨慎的原因所在。”

更多热门内容
京东“机器人救护车”上线,专业服务助力机器人“康复”重返赛场
IT之家 4 月 15 日消息,京东今日宣布正式推出“机器人救护车”,为行业前沿的人形机器人、四足机器人、AI 陪伴机器人等提供专业维修保养服务,涵盖基础维修、故障诊断、换电补能、测试鉴定、美容保养、设备回收…

2026-04-16

菜鸟自研“攀爬机器人”ZeeBot亮相,仓储存取效率实现翻倍跃升
2026年4月15日,菜鸟集团在美国亚特兰大举行的MODEX 2026国际物流展上发布了首款自研的“攀爬机器人”ZeeBot,并确认首个由攀爬机器人智能作业的仓储项目已在广东省交付使用。实测数据显示,该技术使…

2026-04-16

小米Poco C81 Pro入门新机亮相:6.9英寸屏+紫光展锐芯 配置全揭晓
IT之家 4 月 14 日消息,据科技媒体 Notebookcheck 今天报道,小米曾短暂在全球官网上架 Poco C81 Pro 手机,参数随之意外曝光,但相关页面目前已经撤下。该机定位入门,搭载紫光展锐…

2026-04-16

京东推出“机器人救护车”:专业维修助力机器人,服务拓展至国内外多地
IT之家 4 月 15 日消息,京东今日宣布正式推出“机器人救护车”,为行业前沿的人形机器人、四足机器人、AI 陪伴机器人等提供专业维修保养服务,涵盖基础维修、故障诊断、换电补能、测试鉴定、美容保养、设备回收…

2026-04-16

菜鸟发布自研“攀爬机器人”ZeeBot,存取效率翻倍,仓储物流迎新变革
IT之家 4 月 15 日消息,菜鸟集团今日在美国亚特兰大举行的 MODEX 2026国际物流展上发布了首款自研的“攀爬机器人”ZeeBot,并确认首个由攀爬机器人智能作业的仓储项目已在广东省交付使用。 菜…

2026-04-16

小米推出“电池升级”服务,小米13 Ultra首享,149元换更大容量电池
PChome 4月15日消息,小米官方已正式上线“电池升级”服务,目前小米13Ultra机型已率先支持该服务,定价为149元。该服务旨在为用户提供更换更大容量电池的官方渠道,以延长手机续航。 据小米商城显示…

2026-04-16

Meta与博通强强联合 共同打造业界首款2nm AI计算加速器
IT之家 4 月 15 日消息,Meta、博通两家企业美国当地时间 14 日宣布扩展在 MTIA 系列 AI XPU上的合作,其中博通在新闻稿中表示正与 Meta 合作推出业界首款 2nm AI 计算加速器…

2026-04-16

姚安娜携手王安宇,共同担任华为Pura X Max横向阔折叠手机先锋大使
IT之家 4 月 15 日消息,华为终端今日宣布,姚安娜与王安宇将一同出任行业首款横向阔折叠手机 —— Pura X Max 的先锋大使。IT之家注:姚安娜是华为主要创始人兼总裁任正非的女儿,于 2021 …

2026-04-16

小米17系列大屏新机获认证,超大电池与强劲配置或成大屏用户新选择
PChome4月15日消息,今日,一款型号为2605EPN8EC的小米新机通过了工信部SRRC认证,结合此前爆料来看即为17系列大屏新机,预计将命名为小米17Max(也有部分人称小米17S Pro)。 P…

2026-04-16