ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

MIT博士突破性成果:在Transformer内嵌入计算机,重塑LLM能力边界

时间:2026-03-22 03:47:15来源:快讯编辑:快讯

人工智能领域迎来一项颠覆性突破:一位麻省理工学院(MIT)博士带领团队成功将完整计算机系统嵌入Transformer架构,使大语言模型(LLM)首次具备原生计算能力。这项研究通过硬编码方式将WebAssembly(WASM)虚拟机整合进模型权重,让AI无需调用外部工具即可在数秒内完成百万级计算步骤,在求解复杂数独时实现100%准确率,彻底改写了传统模型在数值计算领域的尴尬记录。

研究团队采用的创新解码路径突破了传统注意力机制的效率瓶颈。通过限制二维注意力头的查询范围,他们开发出指数级加速的注意力机制,使模型在CPU环境下达到每秒生成3.3万个token的惊人速度——这一指标是MacBook M2 Pro解码速度的1200倍。尽管实际计算速度仍不及专用处理器,但该技术首次赋予LLM内在的确定性计算能力,使其能够自主完成乘法运算、多步优化等传统弱项任务。

雅典大学副教授Christos Tzamos领导的Percepta团队通过将C语言代码转化为token序列,使模型能够直接执行任意程序。在求解最小成本完美匹配问题时,系统通过自回归方式生成包含虚拟机状态、内存操作和控制流的动态轨迹。每个新token的生成仅需回溯少量先前步骤,这种设计使计算过程呈现图灵机般的线性扩展特征,有效规避了传统Transformer架构的指数级复杂度增长问题。

技术实现的关键在于对计算过程的轨迹编码。研究团队将虚拟机状态分解为指令指针、栈操作和算术运算等组件,通过固定长度的注意力窗口重构当前状态。这种设计使模型在处理长序列计算时,仍能保持恒定的计算复杂度。实验数据显示,系统在3分钟内即可完成传统方法需要数小时的复杂数独求解,且在百万级计算步骤中保持零误差率。

这项突破为AI应用开辟了全新可能性。数值计算、物理模拟和金融建模等领域将直接受益,密码学运算等对确定性要求严苛的场景也获得突破契机。有开发者将其类比为TI公司的DSP芯片架构:神经网络负责逻辑推理,嵌入式计算引擎处理高速运算,这种分工协作模式可能催生新一代混合智能系统。尽管当前研究仍处于实验室阶段,但其展现的技术路径已为解决"9.11与9.9大小比较"等基础性难题提供了根本性方案。

更多热门内容
引力一号遥四成功发射!中国民营火箭长三角远海首秀创多项纪录
界面新闻获悉,7月22日10时54分,东方空间引力一号(遥四)·星联体号运载火箭在中国东海海域点火起飞,将9颗卫星送入预定轨道,同步完成1项载荷试验,本次远海发射任务取得圆满成功。 这是东方空间和引力一号…

2026-07-22

引力一号遥四火箭远海首射成功 一箭9星开启商业航天规模化运营新篇
中新社北京7月22日电 (记者 马帅莎)据中国商业航天企业东方空间发布的消息,北京时间7月22日10时54分,引力一号遥四运载火箭在上海东部海域点火升空,将搭载的东坡13~14星、东坡17~20星、西光贰号0…

2026-07-22

引力一号遥四东海成功发射 9颗卫星入轨赋能人工智能与定量遥感
7月22日10时54分,我国太原卫星发射中心在上海东部海域使用引力一号遥四运载火箭,将搭载的东坡13~14星、东坡17~20星、西光贰号01星、天仪49星、紫丁香三号卫星共9颗卫星顺利送入预定轨道,飞行试验…

2026-07-22

引力一号远海首秀一箭九星!我国民营商业航天再拓海上发射新版图
记者从东方空间(山东)科技有限公司获悉,7月22日10时54分,该公司研制的 引力一号(遥四)运载火箭在我国东海海域点火升空,将搭载的9颗卫星送入预定轨道,并同步开展1个载荷试验,任务取得圆满成功。该火箭近…

2026-07-22

中国商业航天加速崛起!力箭一号2026年将月月发射,首战海上平台
但这一次升空的主角,并不是传统意义上的国家队火箭,而是一枚来自中国民营商业航天企业的火箭——力箭一号遥十四。在目前中国众多民营商业火箭中,力箭一号是唯一一款实现发射卫星数量突破百颗的火箭。 这或许正…

2026-07-22