ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

新加坡国立大学新探索:I2S方法助AI跳出示例“干扰圈”

时间:2025-10-22 22:28:39来源:互联网编辑:快讯

当人工智能模型在处理复杂问题时,人们通常会通过提供示例来提升其推理能力,这种被称为“少样本思维链”的技术曾被视为AI进步的里程碑。然而,新加坡国立大学与悉尼大学、MiroMind AI联合开展的一项研究却发现,这种方法对现代AI模型可能适得其反——示例非但没有提升性能,反而导致准确率大幅下降。

研究团队选取了DeepSeek-R1、Qwen系列等前沿模型,在数学竞赛题和科学推理任务中展开测试。结果显示,即使提供与问题高度相关的优质示例,模型的表现仍会显著恶化,示例数量越多,错误率越高,部分场景下准确率降幅超过35%。这一现象被类比为“经验丰富的厨师在旁人反复指导下反而做砸菜”——现代AI经过强化学习训练后,已形成稳定的内在推理逻辑,外部示例的介入反而会干扰其决策流程。

进一步分析揭示了问题根源。其一为“表面相似性陷阱”:当示例与目标问题在措辞或结构上高度相似时,AI会机械套用解题步骤,忽视问题本质差异。例如,面对“苹果与橘子”相关的题目时,AI可能将计算重量的方法错误应用于价格计算。其二为“策略提取失败”:AI难以从示例中提炼抽象策略,往往只能捕捉到表面模式,如同学习者仅记住词汇搭配却未理解逻辑框架。

针对上述缺陷,研究团队提出了“洞察到解答”(Insight-to-Solve, I2S)方法。该方法通过三步流程优化推理过程:首先引导AI对比示例与目标问题的异同,避免混淆;其次提取示例中的通用策略,如“分析数据结构”或“验证边界条件”;最后基于抽象原则构建全新解决方案,而非直接模仿具体步骤。其升级版I2S+还引入了自我修正机制,允许AI在2-3轮迭代中优化推理路径,主动排查逻辑漏洞。

实验数据证实了新方法的有效性。在AIME 2025数学竞赛测试中,7B参数模型使用I2S+后准确率从42%提升至51.33%,GPT-4.1的准确率则从34%跃升至48%。值得注意的是,该方法不仅适用于开源模型,对GPT-4.1、o1-mini等闭源商业模型同样有效。I2S在计算效率上也表现优异,相比“多答案投票”策略,它能以更低的资源消耗实现更优结果。

在开放式推理任务中,I2S同样展现出稳定性。以GPT-4.1为评判标准的测试显示,该方法在工程和通用推理场景中带来1-2个百分点的性能提升。尽管提升幅度小于数学任务,但考虑到开放式问题的主观性,这一结果仍具有实际价值。研究还发现,迭代改进的效果因问题类型而异:数学问题中,模型规模越大,迭代收益越明显;而开放式任务中,小型模型过度迭代可能导致性能下降,提示需针对不同场景调整策略。

从技术实现看,I2S具有轻量化优势。其流程仅需三次模型调用:问题对比、策略分析和答案构建,无需对原模型进行重新训练,可直接集成到现有系统中。这种特性使其在学术研究和商业应用中均具备推广潜力,例如复杂推理任务、AI教育工具或科学计算领域。

该研究还揭示了AI能力演进带来的新挑战。随着模型推理能力提升,传统训练方法可能失效,需探索更适配先进AI的交互模式。例如,表面合理的输入未必产生积极效果,这要求开发者更谨慎地设计系统交互逻辑。同时,AI的“智能”机制与人类存在本质差异,优化其表现需突破人类认知框架。

跨机构合作在此研究中发挥了关键作用。新加坡国立大学、悉尼大学与MiroMind AI的联合团队整合了学术研究的深度与产业实践的效率,为解决复杂AI问题提供了范例。这种模式或将成为未来AI领域的重要趋势,通过多方优势互补推动技术突破。

研究的核心启示在于:AI技术的快速发展要求我们重新审视传统方法的有效性。与其过度干预AI的内在推理,不如通过理解其工作机制,开发更适配的交互策略。I2S方法的成功正是这一思路的体现——通过优化示例利用方式,释放AI的潜在能力。

更多热门内容
ChatGPT Atlas浏览器问世:AI深度融合让网页浏览变身智能助手
ChatGPT Atlas的一大亮点是其“浏览器记忆”功能,这一创新能够让AI记住用户的浏览历史、对话细节以及交互内容。对于家庭用户,Atlas支持家长监督功能,父母可以为未成年人账户关闭记忆和代理模式,确…

2025-10-22

OpenAI推出AI集成浏览器ChatGPT Atlas,AI赋能浏览器开启智能新篇章
不过,也有网友反馈表示,对于那些每天使用 ChatGPT或任何人工智能的人来说,Atlas这款浏览器提供的附加价值微乎其微,它的目的是吸引那些还没有每天接触人工智能的人,旨在降低门槛,并改善对ChatGPT…

2025-10-22

三大互联网企业论道AI时代:可观测技术如何突破边界,迈向“半自治”运维?
当然,当 AI 进入更关键的环节时,必须具备三种保障机制:1、可解释性:AI在给出结论时,应当能提供推理路径和验证依据,让使用者能复核其逻辑;2、可审计性:所有 AI 决策过程都应记录为审计日志,关键链路…

2025-10-22

智驱广告新未来:亚马逊云科技AI赋能SHAREit Group全球精准投放
10月15日,全球数字内容服务和分发领域翘楚SHAREit Group(茄子科技)与亚马逊云科技在北京联合举办「智驱增长,洞见未来—AI广告创新研讨会」,深度研讨生成式AI在广告技术领域的落地实践提升广告全…

2025-10-22

AI科学家携手创业!ChatGPT核心成员与DeepMind大将共探材料科学新领域
他领导的GNoME项目在2023年利用AI发现了超过200万种全新晶体材料,是哈佛大学凝聚态与材料物理和计算科学的博士。 简单来说,他们要让AI像真正的科学家一样,能够提出假设、设计实验、操作仪器、分析结果…

2025-10-22

李彦宏的AI“非共识”里,藏着百度大模型棋局的破局密码与未来图景
早在 2023 年 5 月 9 日,百度就发布了百度智能云千帆平台,作为面向企业客户的大模型平台,提供大模型推理服务和模型精调开发全套工具链,它帮助企业加速将大模型的能力应用到具体的场景中,深扎产业应用成为…

2025-10-22

三星谷歌高通强强联合,Galaxy XR头显携Gemini AI入场,竞逐XR新赛道
三星电子与谷歌携手高通,正式发布搭载其最新Android XR操作系统和Gemini人工智能的Galaxy XR头显,标志着科技巨头联盟向苹果和Meta在混合现实(XR)及未来智能眼镜市场的主导地位发起直接挑…

2025-10-22