ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

AI编程新突破:Claude Fable 5登顶MirrorCode榜,项目级开发能力获验证

时间:2026-08-05 04:02:33来源:互联网编辑:快讯

在最新公布的MirrorCode编程挑战赛榜单中,AI模型Claude Fable 5以64%的绝对优势占据榜首,其表现远超其他竞争者。紧随其后的GPT-5.6 Sol仅获得21%的成绩,不足Claude Fable 5的三分之一。排名第四的GPT-5.5表现更为惨淡,得分仅为10%,甚至低于其前代GPT-5.4。

MirrorCode测试环境极为严苛,要求模型在完全隔离的条件下,仅凭高层文档和部分测试数据,重新构建与原程序行为完全一致的新程序。测试覆盖Unix工具、解释器、数据查询、生物信息学、密码学和压缩工具等25个领域,每个目标程序需使用两种编程语言各运行三次,且必须同时通过可见测试和隐藏测试的100%完成率,任何细微偏差都会导致任务失败。

在资源消耗方面,测试将单次预算推高至100亿Token,允许最长连续运行7天。部分极端案例中,模型甚至需要持续工作19天,单次成本高达2600美元。这种设计迫使模型通过反复试错、功能补全和结果验证,逐步逼近完美解决方案,整个过程更接近人类工程师的调试行为。

Claude Fable 5在语言适应性测试中展现惊人实力。当使用Go等主流语言时,其解出率达64%;切换至冷门语言Ada后,成绩仅微降至61%。考虑到公开训练数据中Python语料是Ada的230倍,这种表现意味着该模型已突破对特定语言语料的依赖,能够从底层逻辑层面理解程序功能,再以不同语言实现相同行为。相比之下,其他模型在语言切换后性能大幅下滑,GPT-5.6 Sol从24%降至19%,GPT-5.5更从17%暴跌至5%。

生物信息学工具gotree的测试案例极具代表性。该工具包含1.6万行Go代码和40多个命令,Claude Opus 4.7仅用14小时和251美元就完成了99.95%的功能复现,仅因处理日期注释的冷门边界条件失误被判定失败。据专业机构评估,人类工程师完成同等任务需2至17周时间,AI将开发效率提升了数十倍。

当前AI编程能力已从代码片段级向项目级跃迁。Cursor平台通过数百个智能体协作,在一周内完成百万行级浏览器代码开发;Anthropic公司利用16个Claude智能体并行工作,成功构建出可编译Linux 6.9内核的十万行C编译器。OpenAI数据显示,70.2%的Codex用户曾提交超过人类1小时工作量的任务,25.6%用户提交过超8小时工作量的项目。

MirrorCode的64%通过率标志着AI开始承担完整软件开发任务。当目标明确且验收标准自动化时,前沿模型已能独立完成部分中大型软件项目。这种转变正在重塑软件开发流程——人类角色从代码编写者转变为任务定义者和结果验证者,对需求清晰度和验收标准的要求显著提高,而基础编码工作的价值将持续下降。

更多热门内容
DeepSeek内测帖引爆开源圈:769位开发者携712个项目共探Agent新未来
最终来看,这三个方向对应了Agent从“能用”走向“好用”的关键迭代路径:长任务执行能力决定Agent能否完成复杂工作,上下文和记忆能力决定Agent能否持续参与长期项目,而评测和安全能力决定Agent能否…

2026-08-05

北大&元空AI开源科研利器!MIT协议零依赖,30+科研Skills助力科研全流程
你给出一个任务,它可以自己查公开科研数据源、编写并运行分析代码、调用专业计算能力,再把结果整理成图片、表格、三维结构或Markdown报告。 如果你熟悉某个科研方向,可以为它开发新的科研Skills,接入专…

2026-08-05

800万像素+5倍光学变焦:CM8805EM与CM204UE赋能机器人AI视觉新突破
结合不同工况下的长期运行验证结果可以确认,这套方案没有在非核心参数上做无效堆砌,而是针对800万像素成像能力、5倍光学变焦的实用场景,与机器人端的AI应用全链路需求完成了深度适配,有效解决了传统移动机器人视…

2026-08-05

泛亚微透:具身智能布局成果显现,海内外多领域订单不断落地
有投资者向 泛亚微透(688386.SH)提问,作为投资人,我们很看好公司在具身智能的布局。公司依托ePTFE核心材料平台布局电子皮肤基材、高耐弯折机器人线缆两大产品,同时通过参股柔性传感企业构建协同生态,…

2026-08-05

安谋科技All in AI加速跑,四大产品线与三大业务线共筑智能体算力基石
我们看到,从边缘、物理到云端,安谋科技持续引入Arm在这三大业务领域的前沿技术,同时深耕本土创新,自研IP与Arm技术创新互补,构筑异构计算平台,给智能体时代AI落地打造坚实的算力基石。 纵观四大产品线、三…

2026-08-05

北大联合实验室开源科研利器!MIT协议零依赖,30+科研Skills助力AI真做科研
你给出一个任务,它可以自己查公开科研数据源、编写并运行分析代码、调用专业计算能力,再把结果整理成图片、表格、三维结构或Markdown报告。 如果你熟悉某个科研方向,可以为它开发新的科研Skills,接入专…

2026-08-05

AI赋能学习新探索:深圳学子在特色空间解锁个性化成长新路径
与AI一起自习、和AI一起提出实验方案,并搭建虚拟实验室,开发教室导航系统、手搓四足机器人、3D打印轨道作品……以上是南都N视频记者探访福田区石厦学校AI教育应用场景时,看到的同学们在不同AI空间学习到的新技…

2026-08-05

智械博弈新赛场:“冰丝带”里人形机器人拔河秀算法与力学
冯宝运表示,机器人拔河这是第一次,有很多不确定性,拔河比的不是力气,比的是“技术动作”和“脚下的摩擦力”。哪怕被拖得踉踉跄跄,只要它还能自主微调增大摩擦力,那就是人形机器人运动控制最动人的瞬间,因为每一次调整…

2026-08-05