ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

英伟达携手高校推LocateAnything模型,AI检测对象实现高速高精度新突破

时间:2026-05-31 20:02:49来源:互联网编辑:快讯

英伟达联合香港理工大学、南京大学等科研机构,共同推出了一款名为LocateAnything的新型视觉语言检测模型。该模型专注于实现高速、高精度的对象检测,能够在照片或截图中快速定位指定对象,并通过检测框精确标注其位置。这一技术突破为机器人感知、电脑自动操作等需要实时定位的场景提供了强有力的支持。

传统视觉模型在处理即时交互任务时,往往面临速度与精度的平衡难题。LocateAnything通过重新设计检测框预测机制,将视觉语言检测的响应速度提升至新水平。其核心创新在于并行框解码技术,将边界框或点作为固定长度原子单元,仅需单步即可完成坐标预测,显著降低了计算延迟。

为满足不同场景需求,模型开发了三种运行模式:Fast Mode针对端侧机器人和具身智能设备优化,通过牺牲少量精度换取更高吞吐量;Slow Mode侧重离线标注和高精度评测任务,确保数据处理的绝对准确性;Hybrid Mode作为默认选项,在常规情况下快速输出结果,遇到格式异常或空间歧义时自动切换至自回归解码,实现效率与精度的动态平衡。

研究团队同步构建了包含1200万独立图像、1.38亿语言查询和7.85亿边界框的LocateAnything-Data数据集。该数据集覆盖通用检测、GUI元素定位、指代表达理解、OCR文字定位、版面分析和点定位六大领域,为模型训练提供了丰富的场景支持。通过这种多维度数据训练,模型展现出强大的泛化能力,能够适应不同领域的定位需求。

在性能测试中,LocateAnything展现出显著优势。基于单张NVIDIA H100 GPU的Hybrid Mode下,模型达到每秒12.7个检测框的处理速度,远超Qwen3-VL的1.1 BPS和Rex-Omni的5.0 BPS。在高精度任务中,模型在LVIS数据集IoU=0.95标准下取得31.1分,ScreenSpot-Pro平均F1值达60.3,DocLayNet和M6Doc分别获得76.8与70.1的优异成绩,各项指标均领先同类模型。

这项技术突破为实时交互系统提供了新的解决方案。在工业自动化领域,机器人可通过快速定位实现更精准的操作;在智能办公场景中,系统能够自动识别文档中的关键信息;在辅助技术方面,模型可帮助视障用户快速定位界面元素。随着技术不断完善,LocateAnything有望推动人机交互方式向更自然、高效的方向发展。

更多热门内容
星河作伴天宫为家 神舟二十三号乘组太空“出差”忙科研享生活
央视网消息:神舟二十三号乘组三名航天员朱杨柱、张志远、黎家盈在轨已满一个月。 神二十三乘组和机器人“小航”进行互动,开展触碰交互测试,采集相关数据用于优化后续在轨机器人运动行为规划方法。三名航天员利用脑电采集…

2026-06-29

北京太空算力创新中心揭牌!六大攻关方向+四项成果助力太空算力发展
据悉,北京太空算力创新中心采用“公司+联盟”双轮驱动运营模式,明确六大核心攻关方向,包括太空原生算力芯片设计与研制、高性能超带宽的太空算力载荷、卫星平台与地面验证基础设施、大模型部署与软硬件协同优化、天地一…

2026-06-29

惠普携手OpenAI推进战略合作 全方位部署Frontier平台助力企业加速转型
OpenAI官网新闻稿截图 上证报中国证券网讯据OpenAI官网6月28日消息,惠普公司宣布与OpenAI达成战略合作,全方位部署OpenAIFrontier平台,加速企业转型并提升客户体验。 据此前…

2026-06-29

惠普携手OpenAI深化合作 全球业务全面部署Frontier平台促发展
来源:环球网 【环球网科技综合报道】6月29日消息,惠普公司宣布与OpenAI达成战略合作,将在其全球业务中全面部署OpenAIFrontier平台,旨在提升客户体验和加速运营转型。 据介绍,这项战略合…

2026-06-29