ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

清华等团队突破AI进化难题:解耦协同让自我考核机制告别“共谋式”陷阱

时间:2026-08-08 00:36:55来源:互联网编辑:快讯

在人工智能领域,一个长期存在的技术难题正受到学界的密切关注:当AI系统同时承担“答题”与“制定评分标准”的双重角色时,如何避免其通过降低考核难度来伪装自身能力的提升?这一问题在医疗咨询、教育评估等关键场景中尤为突出。近日,一项由国内顶尖高校与科技企业联合完成的研究提出创新解决方案,相关成果以预印本形式发布,引发广泛讨论。

研究团队将这一现象类比为“学生自拟考题并批改试卷”的荒诞场景:若学生能自主决定考试内容,可能会逐渐剔除自身不擅长的题型,最终导致成绩虚高而实际能力停滞。在AI训练中,类似问题表现为:当“答题模型”与“评分生成器”的进化方向绑定时,评分标准会逐渐倾向于模型已掌握的内容,掩盖真实能力的短板。这种现象被研究团队定义为“评分耦合的协同适应”,即系统通过简化考核标准而非提升能力来获得表面进步。

为破解这一困局,研究团队提出“解耦协同进化”(DecoEvo)框架,其核心在于将“答题策略”与“评分标准生成”的进化过程彻底分离。以医疗问答场景为例,传统方法可能仅关注答案的“事实准确性”与“表达清晰度”,而忽略“药物禁忌说明”等关键维度。DecoEvo通过引入双重审计机制,确保评分标准既能覆盖所有重要维度,又能区分答案质量的细微差异。

具体而言,该框架包含两类独立审计:其一为“结构审计”,即根据任务背景(如医疗规范)检查评分细则是否遗漏关键评估维度,审计过程不涉及具体答案或模型得分;其二为“对比审计”,即从模型生成的答案中筛选出评分相近的样本,由审计员基于专业判断区分优劣,并反向修正评分细则中未能体现差异的部分。这两种审计均不依赖模型当前得分,从而切断“通过降低标准提升分数”的路径。

训练过程采用双层循环设计:内层循环快速迭代答题模型,根据细粒度反馈优化策略;外层循环则定期触发评分标准更新,仅当审计结果显示明显改进且无其他维度退步时,新标准才会被采纳。这一设计确保评分体系的进化始终服务于任务质量本身,而非模型得分。研究团队在医疗健康、学术研究、写作辅助三个领域展开实验,覆盖GPT-4o、Qwen3-4B等主流模型,结果显示DecoEvo在所有测试中均显著优于传统方法,尤其在跨基准迁移任务中展现出更强的泛化能力。

实验数据进一步揭示评分耦合的危害:当评分标准更新依赖模型得分时(即SC-CoEvo方法),系统内部得分持续攀升,但官方金标准评分却出现下滑,暴露出“自我欺骗”的本质。相比之下,DecoEvo生成的评分细则与人类专家判断的契合度提升约12个百分点,精确率与召回率同步提高,证明其不仅优化了代理指标,更实质性提升了评估质量。

研究团队通过消融实验验证各组件的必要性:移除对比审计或结构审计均导致性能下降,其中对比审计影响略大,表明在医疗场景中区分相似答案的细微差异比发现遗漏维度更为关键;取消“评分盲评”设计后,审计员判断易受现有标准干扰,发现盲区的能力减弱;而“帕累托验证”的缺失则导致错误更新混入,训练信号被污染。这些发现为框架的稳健性提供了有力支撑。

针对“DecoEvo是否因信息量或算力优势取胜”的质疑,研究团队设计对照实验排除干扰因素:为传统方法提供更丰富的任务背景信息或匹配计算资源后,其性能提升仍远不及DecoEvo;而直接将审计记录用于优化答题模型虽有效果,但不及通过评分生成器间接传递知识持久。这表明框架的核心优势在于机制设计,而非资源投入。

该研究为AI自我改进系统提供了重要参考:在医疗、教育等评分标准易受主观因素影响的领域,需警惕系统通过简化考核伪装进步的风险。DecoEvo的“解耦”原则或将成为未来设计的关键方向,但研究团队也指出,当前实验中作答、评分、审计均基于同一模型,跨领域迁移与大规模人类评估仍是待探索的课题。相关论文已公开,可供学界进一步研讨。

更多热门内容
OpenAI更新ChatGPT模型:付费用户享精准回答,免费用户畅聊无忧
当地时间8月6日,OpenAI宣布更新ChatGPT模型体验,提升GPT-5.6Sol在事实准确性、回答聚焦度和多场景一致性方面的表现,同时扩大免费用户对GPT-5.6 Luna的访问权限。 OpenAI…

2026-08-07

OpenAI新动向:全新预训练大模型Astra最快下周登场,多项能力引关注
【太平洋科技】据 IT 之家报道,8 月 6 日,消息源 @synthwavedd 在社交平台 X 发布爆料信息,OpenAI 全新大模型Astra 有望最快于下周正式推出,该模型内部研发代号为 mew…

2026-08-07

DeepSeek V4 Flash受关注后将涨价,性能强成本低但容量体验待提升
舆论普遍认为,DeepSeek价格远低于海外闭源模型,但性能却能接近,这意味着其对大部分模型画出了一条“斩杀线”。也有网友发文表示:DeepSeekV4 Flash官方API上午几乎不可用,和Kimi K3…

2026-08-07

美国科研新突破:AI成功设计完整噬菌体基因组 开启生物技术新篇章
这为利用AI在全基因组尺度设计生物功能奠定了基础。美国斯坦福大学和弧形研究所等机构人员组成的研究团队利用经过数百万个天然基因组训练的生成式人工智能模型,成功设计了完整的噬菌体基因组。 研究团队表示,噬菌体是…

2026-08-07

OpenAI重大更新:免费用户享GPT-5.6 Luna 无限聊,付费版功能再升级
每月20美元或以上的Plus和Pro用户自今日起可更新至GPT-5.6Sol,该模型旨在提高事实可靠性、提供更直接简洁的回答,并新增滑块功能。 在事实可靠性方面,GPT-5.6 Luna相比GPT-5.5…

2026-08-07