ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

地平线发布LoFT视频几何模型 提升机器人空间感知

时间:2026-11-21 20:17:35来源:互联网编辑:快讯

11月18日,地平线机器人实验室推出名为LoFT的原生视频几何基础模型。该模型全称为Looped Foundation Transformer for Video Geometry,能够以普通RGB视频作为输入,推算相机位置、朝向和场景深度,并重建视频中的三维空间结构,为机器人空间感知、环境理解与具身学习提供底层技术支撑。

机器人若要在真实环境中自主执行复杂任务,首先要对三维空间形成理解。除了识别物体,它还需判断物体在哪里、距离多远,以及物体之间如何分布。如何从连续视频中稳定提取这些空间线索,是具身智能研究面对的重要问题。

围绕这一目标,LoFT把视频时序建模和三维几何学习放在同一框架中,使用双循环Transformer结构。一个循环负责汇集不同视频帧里的视觉信息,另一个循环不断更新相机状态,借助视角变化逐步还原更准确的三维场景。模型只依赖RGB视频,不要求额外输入深度图或相机位姿。

为支持训练,地平线机器人实验室搭建了统一的三维重建数据处理与训练平台。该平台包含约297万条有效训练序列、9.62亿帧图像记录,场景横跨真实与仿真、动态与静态,为模型学习多样环境中的几何特征提供数据条件。

评测方面,LoFT在SpatialBench、ClassicBench和VRBench三套体系中,多项深度估计指标处于领先位置,相机位姿与轨迹恢复也表现出竞争力。相关实验覆盖机器人第一人称视角、动态街道、室内环境和开放场景,对快速运动物体、动态车辆及复杂细节均可进行几何恢复。

在应用层面,三维空间信息可帮助机器人在自主移动和环境探索中建立地图,判断自身位置与障碍物分布;在物体操作中,几何信息可为物体定位、空间关系理解和动作规划提供参考。

LoFT是地平线机器人实验室推进具身智能基础研究的最新进展之一。此前,团队已经推出具身智能仿真数据引擎EmbodiedGen、通用操作基座模型HoloBrain、人形机器人全身运动控制模型HoloMotion,并开源机器人学习基础设施RoboOrchard,涉及数据生成、环境感知、机器人操作和运动控制等环节。

从智能驾驶延伸到更广泛的机器人应用,环境感知、决策与控制始终是智能系统需要处理的核心问题。地平线创始人兼CEO余凯曾在公开演讲中提到,公司创立之初便看到机器人将广泛存在的趋势,希望为机器人提供智能计算平台。智能驾驶业务中积累的算法研发、软硬件协同和工程经验,也为其他机器人形态的探索提供了技术基础。

更多热门内容
南水北调天河大模型升级 防汛分析压缩至分钟级
中国南水北调集团21日对外公布,南水北调“天河”大模型V2版本已完成升级并正式发布。与V1版本着重打牢基础不同,V2版本把发力点放在应用层面的深化上,推动水网管理决策从数据与机理支撑,走向数据、机理与智能协同驱动。在防汛度汛领域,“天河”大模型接入了27颗遥感

2026-11-21

数十台智元G2进驻蓝思科技手机测试线 承担自动上下料
IT之家 11 月 21 日消息,智元创新(AGIBOT)与蓝思科技达成战略合作,于手机测试产线部署智元精灵 G2机器人,数十台机器人同时进行测试工位自动上下料、测试设备交互等工作。 据介绍,精灵 G2 可…

2026-11-21

手机测试产线引入精灵G2 智元蓝思科技数十台机器人协同作业
11月21日,智元创新与蓝思科技宣布建立战略合作,精灵G2机器人已进入手机测试产线。数十台机器人分布在测试工位,同步执行自动上下料,并与测试设备进行交互作业。从作业能力看,精灵G2能够完成手机产品全自动转运、智能分拨和高效上下料。相比传统自动化设备,它的通用

2026-11-21