ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

神州光大突破国产算力瓶颈:MoE模型后训练MFU超34% 加速产业落地

时间:2026-09-14 12:10:32来源:互联网编辑:快讯

在AI大模型竞争日益激烈的当下,行业焦点已从单纯的模型参数规模转向更核心的技术能力突破。神州光大近日宣布,其基于深圳河套学院AI训练平台项目团队公开论文的技术路径,通过自主工程体系成功实现技术复现与优化,在国产算力环境下完成万亿参数级MoE模型全参数后训练,模型算力利用率(MFU)稳定突破34%大关。这一成果与论文在Ascend SuperPOD架构下取得的34.22%MFU数据高度吻合,较开源基线效率提升近3倍,标志着国产算力支撑下的AI训练技术正式迈入产业级应用阶段。

MoE(混合专家)模型作为当前大模型发展的重要方向,通过动态路由机制将参数规模推至万亿级别,同时保持单次推理的计算量可控。但这种架构对训练系统提出严苛挑战:跨专家通信的复杂性、显存碎片化问题、算子调度的碎片化以及长周期训练的稳定性,成为制约技术落地的关键瓶颈。神州光大技术团队针对这些难题,在国产算力底座上构建了系统性解决方案,重点攻克了流水线气泡压缩、通信计算重叠优化、双缓冲显存管理等核心技术,有效解决了算力被通信等待、显存碎片和无效空转消耗的痛点。

据技术白皮书披露,该方案通过重构训练流水线,将计算与通信重叠时间提升40%;采用动态显存分配策略,使显存利用率提高25%;通过智能算子融合技术,减少30%以上的碎片化计算。这些优化使万亿参数MoE模型在全参数后训练中,算力损耗降低至行业领先水平,为金融风控、智能制造、能源调度等高价值场景的模型迭代提供了可靠技术支撑。

随着技术验证的完成,神州光大正式启动规模化推广计划。该计划将围绕MoE模型优化、国产算力适配、真实业务场景落地三条主线,构建可复用的训练优化工具链。通过沉淀并行配置推荐算法、瓶颈自动诊断系统、算子深度优化库等核心能力,形成覆盖训练全流程的标准化解决方案。目前,团队已与多家金融机构达成合作,将技术应用于信贷风险评估模型的实时迭代,使训练周期缩短60%,硬件成本降低45%。

"34%的MFU不是技术终点,而是产业应用的起点。"神州光大董事长高峰在技术研讨会上强调,当前AI训练面临的核心矛盾是前沿技术与业务需求的脱节。公司下一步将重点解决模型迭代确定性问题,通过建立训练成本评估模型和稳定性预测系统,让客户能够精准预估技术升级带来的业务价值提升,真正实现从"实验室突破"到"商业化交付"的跨越。

更多热门内容
豆包手机助手消费者版正式亮相,多场景适配与新功能助力智能生活升级
本次豆包手机助手还新增了屏幕问答能力,用户无需额外截图或切换应用,即可让助手结合当前屏幕内容继续处理任务。用户还可以通过语音输入、三指上滑,或同时按住AI 键和音量键等方式,手动保存当前屏幕内容,形成可在…

2026-09-14

豆包手机助手消费者版亮相 交互升级隐私护航 努比亚新机16日开售
豆包手机助手以豆包App为基础,与手机厂商在系统层面展开合作,围绕交互、任务执行、本地记忆及检索等核心体验,进一步探索 AI 在手机中的应用。此外,用户还可以通过语音输入、三指上滑,或同时按住 AI 键和…

2026-09-14

豆包手机助手消费者版亮相!交互记忆任务执行升级 首款搭载新机16日开售
豆包手机助手以豆包App为基础,与手机厂商在系统层面展开合作,围绕交互、任务执行、本地记忆及检索等核心体验,进一步探索AI在手机中的应用。此外,用户还可以通过语音输入、三指上滑,或同时按住AI键和音量键等方…

2026-09-14

苹果门店新规引关注:晨会站立禁电子设备,提前开门全员鼓掌迎客
IT之家 9 月 14 日消息,彭博社的马克 · 古尔曼(Mark Gurman)昨日(9 月 13 日)发布博文,报道称针对 AppleStore 零售店员工,苹果出台了更严格的开店前晨会规则。 IT之家…

2026-09-14

全球首个万台级人形机器人超级工厂投产 柔性产线开启智能制造新纪元
快科技9月14日消息,近日,优必选位于广西柳州的超级智慧工厂正式投产,这也是全球首个万台级工业人形机器人制造基地,科幻片里机器人制造机器人的画面,现在已经在现实产线上落地。 单台整机需要拧紧2000多颗不同规…

2026-09-14