ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

从语言到世界:商汤林达华谈AI新范式与原生多模态的突破之路

时间:2025-12-18 04:28:53来源:互联网编辑:快讯

商汤科技最新发布的原生多模态模型SenseNova-SI,在空间智能领域实现重大突破,其性能指标全面超越李飞飞团队研发的Cambrian-S模型。这款由商汤自主研发的开源模型,在多个空间智能基准测试中刷新纪录,成为当前性能最优的开源解决方案。该成果标志着中国科技企业在AI技术底层架构创新方面迈出关键一步。

在量子位与商汤科技首席科学家林达华的深度对话中,他指出当前AI发展正面临范式转折点。自2022年ChatGPT引发的参数竞赛以来,单纯依赖模型规模扩张的路径已显露出明显瓶颈。尽管大语言模型在文本处理领域持续突破,但在三维空间认知、物理世界交互等核心能力上仍存在显著缺陷。这种局限性在最新测试中暴露无遗:当被要求识别图像中手指数量时,传统多模态模型仍会机械性输出"5根"的标准答案,完全忽视实际图像中的真实数量。

商汤团队通过架构创新破解这一难题。其研发的NEO架构采用原生多模态设计,从底层Transformer模块开始实现视觉与语言信号的深度融合。区别于传统拼接式架构将视觉编码与语言处理分离的模式,NEO架构通过混合注意力机制,使模型在每层推理中同步处理图文信息。这种设计使模型能够保留原始视觉特征的完整信息,避免传统架构中因信号降维导致的空间认知损失。

<

技术突破带来显著效率提升。SenseNova-SI模型仅使用同类模型10%的训练数据,便在空间推理、三维建模等关键指标上达到领先水平。测试数据显示,该模型在跨视角物体识别任务中准确率提升37%,在复杂场景理解任务中错误率降低42%。更值得关注的是,模型展现出类似人类的"空间想象力"——当输入物体正面图像时,能够准确预测其侧面结构特征,这种能力在自动驾驶、机器人导航等领域具有重要应用价值。

在技术落地方面,商汤团队展现出独特的工程优化能力。以实时语音驱动数字人产品SekoTalk为例,通过算法蒸馏技术将传统扩散模型的推理步骤从100步压缩至4步,实现64倍速度提升。这项突破使得消费级显卡即可支持实时视频生成,将AI应用成本降低两个数量级。据测试,使用RTX 4090显卡可同时驱动8个数字人进行实时互动,为直播电商、在线教育等领域开辟新的商业模式。

林达华特别强调工业红线标准:"任何AI技术必须通过成本效益测试,当推理成本实现每年1-2个数量级下降时,才能从实验室走向规模化应用。"这种务实理念贯穿商汤的技术研发全链条。在模型训练阶段,团队通过动态数据筛选机制,将有效训练数据占比从行业平均的15%提升至63%;在部署环节,采用自适应量化技术使模型内存占用减少78%,推理延迟降低54%。

针对AI从业者的职业发展,林达华给出建议:当前大语言模型赛道竞争过度,年轻研究者应关注具身智能、科学计算、工业制造等新兴领域。他特别指出,中国拥有全球最完整的工业体系和最丰富的应用场景,这种独特优势为发展物理世界交互型AI提供了得天独厚的条件。商汤最新开源的NEO架构和SenseNova-SI模型,已为全球开发者提供完整的底层框架和训练工具,相关代码已在GitHub平台公开。

更多热门内容
GPT-5.6系列模型上线,OpenAI智能体AI产品Tokens用量上周激增2.5倍
月 15 日消息,OpenAI 首席执行官萨姆 · 奥尔特曼(Sam Altman)昨日(7 月 14 日)在 X 平台发布推文,晒出旗下智能体AI(涵盖 Codex 和 ChatGPT Work)亮眼成绩…

2026-07-16

2026世界人工智能大会将启,聚焦发展新阶段,专家解读难点堵点破解路径
未来真正决定竞争力的,不是哪一个模型领先,而是谁能够率先建立智能时代的数据基础设施、产业生态和全球治理体系。过去,全球在交通基础设施和能源基础设施领域,开展了大量的卓有成效的合作,在互联网基础设施方面也有超过…

2026-07-16

猿辅导马旻互联网大会发声:AI大阅读破解教育“不可能三角”
在规模化上,AI老师可以同时服务无限个学生,彻底打破优质师资的天然瓶颈;在个性化上,该AI不直接给出答案,而是以启发式追问引导孩子自主思考,为每个孩子打造专属阅读路径;在高质量上,猿辅导基于多年的教研积累,…

2026-07-16

Nature发文!宇树科技人形机器人首秀活体手术,开启医疗新可能
这一研究也被称为是全球首例使用人形机器人完成的活体手术。 据介绍,研究团队一共完成了两台手术:一项手术由一台人形机器人与一名担任助手的人类外科医生组成“人机团队”,实施了胆囊切除。在杭州,以宇树科技为代表的具…

2026-07-16