ITBEAR科技资讯
网站首页 科技资讯 财经资讯 分享好友

昆仑万维发布SkyReels-V1:国内首个AI短剧视频生成模型,支持图生视频

时间:2025-02-18 11:34:08来源:ITBEAR编辑:快讯团队

昆仑万维近期宣布了一项重大技术突破,正式向公众开源两大创新模型:SkyReels-V1与SkyReels-A1。这两款模型分别针对AI短剧创作和视频表情动作控制,标志着国内在视频生成技术领域的重大进展。

SkyReels-V1作为首个面向AI短剧创作的视频生成模型,其在技术层面实现了诸多突破。该模型通过细致入微的表演细节打标,以及对情绪、场景和表演诉求的深入处理,利用海量的好莱坞级别数据进行训练和优化。据昆仑万维介绍,SkyReels-V1不仅能够生成具备电影级质感的画面,还在构图、演员站位和相机角度等方面展现出卓越的专业能力。

SkyReels-V1的另一大亮点在于其强大的表情动作生成能力。模型支持33种人物表情与超过400种自然动作的灵活组合,能够精准还原真人的情感表达,如大笑、怒吼、惊讶和哭泣等微表情,使生成的短剧更加生动和真实。

SkyReels-V1还具备文生视频和图生视频的双重能力,成为开源视频生成模型中参数最大、支持图生视频的佼佼者。在自研推理优化框架「SkyReels-Infer」的加持下,模型在单台4090显卡上仅需80秒即可完成544p分辨率的视频推理,并支持分布式多卡并行处理,进一步提升了生成效率。

除了视频生成能力外,SkyReels-V1还构建了影视化表情识别体系,能够精准理解11种影视戏剧中的人物表情,如不屑、不耐烦等细腻情感。同时,模型还具备人物空间位置感知和行为意图理解能力,能够基于人体三维重建技术,生成影视级的人物站位和精准的行为语义分析。

为了进一步提升人物视频生成的精准度和可控性,昆仑万维还开源了SkyReels-A1模型。这款SOTA级别的视频基座模型表情动作可控算法,能够基于任意人体比例生成人物动态视频,并支持视频驱动的电影级表情捕捉。通过输入参考人物图片和驱动视频,SkyReels-A1能够将驱动视频中的面部表情和表演细节完美“移植”到参考图片中的人物身上。

SkyReels-A1的开源,无疑为视频创作者提供了更加灵活和高效的创作工具。无论是专业影视制作团队还是个人创作者,都能够利用这两款模型,轻松实现高质量的视频内容创作。

对于对这两款模型感兴趣的开发者和技术爱好者,可以通过以下链接获取更多信息和资源:

SkyReels-V1:https://github.com/SkyworkAI/SkyReels-V1

SkyReels-A1:https://github.com/SkyworkAI/SkyReels-A1

更多热门内容