ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

京东开源实时流式视频编辑新模型,为多领域创作与具身智能发展添动力

时间:2026-08-05 19:03:40来源:快讯编辑:快讯

在视频创作领域,一项突破性技术正引发变革。京东近日宣布开源自研的实时流式视频编辑模型JoyAI-Video-Edit,该模型通过创新性的实时交互设计,将传统视频编辑的"素材预处理"模式转变为"边播放边创作"的动态流程,为影视制作、直播电商、家装设计等行业带来全新解决方案。

技术突破首先体现在处理效率上。针对视频编辑常见的卡顿延迟问题,研发团队基于全自研架构实现了720P分辨率下30帧/秒的实时推理能力。这意味着在保持画面清晰度的同时,模型能够精准同步视频播放节奏,即使处理复杂场景切换也能保持流畅。更引人注目的是其突破性的时长支持能力,不同于传统模型仅能处理短片段的限制,该系统可实现不限时长的持续编辑,用户无需等待完整视频生成即可在播放过程中实时调整画面元素。

在实际应用场景中,这项技术展现出强大适应性。直播场景下,主播可即时更换服装展示效果;影视创作中,导演能动态调整场景风格和人物造型;家装设计领域,设计师可实时切换家具款式与装修风格。测试数据显示,在服装更换、场景迁移等典型任务中,系统响应速度较传统方法提升3倍以上,编辑精度达到98.7%的像素级匹配度。

在技术评估环节,JoyAI-Video-Edit展现出全面优势。与国际主流模型对比测试中,该系统在OpenVE-Bench权威评测中取得综合得分领先17.6%的优异成绩,特别是在风格迁移、物体替换等核心指标上表现突出。研发团队透露,这得益于其独创的动态注意力机制,能够精准识别视频中的时空关联要素,在保持编辑实时性的同时确保画面逻辑连贯性。

这项技术的价值远不止于视频创作领域。在具身智能训练场景中,系统可将人类操作视频转化为机器人训练素材,通过保留动作轨迹的同时替换执行主体,单段视频可扩展出数十倍的有效训练数据。这种数据合成方式大幅降低了机器人训练成本,为工业自动化、服务机器人等领域提供了创新解决方案。

随着JoyAI-Video-Edit的开源,京东已构建起完整的物理世界模型体系。该体系涵盖图像编辑、长视频生成、实时交互、语音处理、机器人操控等多个维度,形成从感知到决策的技术闭环。此次开源不仅为开发者提供先进工具,更通过开放模型能力推动AI技术在实体经济的深度应用,标志着人工智能从数字世界向物理世界渗透迈出关键一步。

更多热门内容
马斯克预言代码将成历史?AI直出二进制引热议,软件界大佬激烈交锋
就在刚刚,马斯克在 X 上甩出一条暴论:代码正在变成下一个汇编,下一步是彻底摒弃它,让 AI 直接生成二进制! 而这正是 Douma 那个「半个世纪前的类比」最薄弱的地方:一个是翻译官,忠实、准确、零发挥;…

2026-08-05

网络安全“祖师爷”Halvar Flake加入,OpenAI为AI安全再添重磅砝码
在个人主页上,Thomas是这么介绍的:BinDiff成了行业标准,甚至成了一个「动词」。 2016-2018年底,他在谷歌ProjectZero当研究员,那是全球最出名的漏洞猎人团队。 过去一年多,Th…

2026-08-05

马斯克宣布SpaceX与英伟达深度绑定!AI算力将“上天”开启新篇章
马斯克还预告称,首批StarmindAI卫星将于明年开始发射升空。据悉,这套系统将真正把算力搬上太空,每颗Starmind卫星都将搭载英伟达Rubin GPU和Vera CPU。此前,SpaceX于6月1…

2026-08-05

字节跳动推出SeedRealtime大模型:音视频全双工交互,开启智能交互新体验
在多人聚会场景中,模型能够识别不同人物身份并持续对应发言者;帮助外国游客实时理解中文菜单和服务员介绍;在博物馆中持续观察镜头画面,识别指定文物后主动提醒;辅助用户操作咖啡机并根据画面变化实时纠错;阅读论文时…

2026-08-05

马斯克宣布SpaceX未来AI服务全押英伟达 首批Starmind卫星明年升空
我们认为它是最好的AI计算机,我们非常重视与英伟达在多个层面的密切合作与伙伴关系,”马斯克直言:“所以我们只与英伟达合作。” 英伟达当时在社交平台送上上市祝贺,马斯克则回应称,期待将双方“令人兴奋的合作推向新…

2026-08-05

马斯克宣布SpaceX将独家用英伟达系统 2027年启动太空数据中心部署冲刺万亿营收
在约一小时的财报电话会议上,马斯克表示,SpaceX计划到2030年实现1万亿美元营收,较此前设定的2031年提前一年。作为“Starmind”卫星计划的一部分,公司还计划在地面和太空部署英伟达Vera R…

2026-08-05

云爪科技破局企业AI应用难题:让AI无缝融入业务,成为增长新引擎
一家中小企业想在今天真正用起来AI,至少需要:搞清楚市面上几十个大模型各自擅长什么——这本身就需要持续跟踪,因为模型每1-2个月就迭代一次;学习提示词工程,写出能稳定产出合格内容的prompt,通常要1-…

2026-08-05

SpaceX本月或再试星舰发射 陆地回收计划迈出关键一步
马斯克此前曾表示,SpaceX可能在今年某个时候尝试上级火箭陆地回收,并且可能在第14次飞行中进行,具体取决于第13次飞行次任务的表现。“假设我们获得监管批准,我们将在下一次飞行中尝试用发射塔捕捉飞船,暂…

2026-08-05

SpaceX进军移动服务引震动 电信三巨头结盟能否守住用户阵地?
SpaceX通过去年宣布的两笔交易,以196亿美元从EchoStar收购了65兆赫无线频谱许可证,涵盖AWS-3、AWS-4和H-Block频段。 她表示,公司将建设必要的基础设施,使Starlink成为“…

2026-08-05