铿鸟百科网

当前位置:主页 > 百科 > 科技数码 >

昆仑万维开源SkyReels-V1:国内首个AI短剧视频生成模型问世

昆仑万维开源SkyReels-V1:国内首个AI短剧视频生成模型问世

时间:2025-04-24 来源:铿鸟百科网 收集整理:小编 阅读:
导读:昆仑万维近日宣布了一项重大技术突破,正式开源了两款前沿的AI视频生成模型:SkyReels-V1与SkyReels-A1。这两款模型分别标志着国内在AI短剧创作和视频表情动作控制领域迈出了重要一步。SkyReels-V1,作为国内首个面向A

昆仑万维近日宣布了一项重大技术突破,正式开源了两款前沿的AI视频生成模型:SkyReels-V1与SkyReels-A1。这两款模型分别标志着国内在AI短剧创作和视频表情动作控制领域迈出了重要一步。

SkyReels-V1,作为国内首个面向AI短剧创作的视频生成模型,其研发过程中深度挖掘了表演细节,并对情绪、场景及表演需求进行了精细处理。该模型采用了大量高质量的好莱坞级别数据进行训练与微调,确保了其生成内容的专业水准。昆仑万维官方介绍称,SkyReels-V1能够生成影视级的人物微表情表演,支持33种人物表情与超过400种自然动作的组合,从而精准还原真人的情感表达,无论是大笑、怒吼、惊讶还是哭泣,都能细腻呈现。

SkyReels-V1的每一帧画面都彰显出电影级的质感,这得益于其基于好莱坞影视数据的训练。从构图、演员站位到相机角度,每一个细节都力求完美。SkyReels-V1不仅支持文本生成视频,还突破了图生视频的壁垒,成为开源视频生成模型中参数最大、支持图生视频的一款。在同等分辨率下,其各项指标均达到了开源领域的顶尖水平。

SkyReels-V1的功能远不止于此,它还具备影视化表情识别体系,能够精准理解11种影视戏剧中的人物表情,如不屑、不耐烦等微妙情绪。同时,基于人体三维重建技术,该模型还能感知视频中多人的空间相对关系,从而生成影视级的人物站位。它还构建了超过400种行为语义单元,实现了对人物行为的精准理解,并能够分析人物、服装、场景与剧情的关联。

在性能方面,SkyReels-V1同样表现出色。借助自研的推理优化框架「SkyReels-Infer」,该模型在544p分辨率下,单台4090显卡的推理时间仅需80秒。同时,它还支持分布式多卡并行处理,以及多种并行技术,进一步提升了处理效率。为了满足低显存用户的需求,该模型还采用了fp8量化及参数级卸载技术,并通过flash attention、SageAttention等优化手段,进一步降低了延迟。基于开源diffuser库,SkyReels-V1的易用性也得到了显著提升。

为了更精准地控制人物视频生成,昆仑万维还开源了SkyReels-A1,这是一款SOTA级别的基于视频基座模型的表情动作可控算法。与Runway的Act-One相媲美,SkyReels-A1支持视频驱动的电影级表情捕捉。它能够基于任意人体比例(包括肖像、半身及全身构图)生成人物动态视频。通过将参考人物图片与驱动视频同时输入,SkyReels-A1能够将驱动视频中的面部表情和表演细节精准地“移植”到给定参考图片的人物身上。

这两款开源模型的发布,无疑将为AI视频生成领域注入新的活力。感兴趣的开发者可以通过以下链接获取更多信息:SkyReels-V1(https://github.com/SkyworkAI/SkyReels-V1)与SkyReels-A1(https://github.com/SkyworkAI/SkyReels-A1)。

相关阅读

  • ipadmini2现在还能用吗,苹果ipadmini2现在还能用吗

    ipadmini2现在还能用吗,苹果ipadmini2现在还能用吗

    2023年ipadmini2还能用吗?根据目前的技术发展趋势来看,2023年的iPad mini 2可能已经过时,无法满足最新的软件和应用程序的要求。随着时间的推移,新的操作系统和应用程序通常需要更高的处理能力和更大的内存。因此,尽管iPa

  • 华为p20pro,华为p20pro上市时间和价格

    华为p20pro,华为p20pro上市时间和价格

    华为P20 Pro值得入手吗?你好,华为p20pro是一款非常不错的手机。如果你没有以下问题,那是真心非常建议你立即下手购买的了。1,如果你很穷,只买得起红米、小米,那么,很显然,你不值得入手华为p20rpo的了。2,如果你就是看不惯国产手

  • 越南计划成为半导体领先国家,雄心壮志与挑战并存

    越南计划成为半导体领先国家,雄心壮志与挑战并存

    随着全球半导体市场的不断扩大和技术的飞速发展,越南作为一个具有潜力和优势的新兴经济体,正计划成为半导体领域的领先国家,这一雄心壮志的背后,既体现了越南政府对半导体产业重要性的认识,也反映了该国在半导体领域的独特优势和发展潜力,本文将探讨越南

  • 深度解析,三星I9100——一部经典的智能手机传奇

    深度解析,三星I9100——一部经典的智能手机传奇

    亲爱的读者,你是否曾对一款手机的历史和影响力感到好奇?我们要聊的是那个曾经风靡全球,引领智能手机潮流的明星——三星Galaxy S II,型号为I9100,这款手机就像一部活生生的历史教科书,展示了科技与设计如何完美融合,让我们一起走进它的

  • 深度探索,联想A370e手机,实用与创新的完美结合

    深度探索,联想A370e手机,实用与创新的完美结合

    在这个科技日新月异的时代,一款优质的手机不仅是我们日常生活中的得力助手,更是我们了解科技魅力的窗口,我们将聚焦联想A370e,这款以实用性和创新性并重的智能手机,带你走进它的世界,感受其独特的魅力。联想A370e的外观设计:简约而不简单联想

  • 风车动漫网,探索动画世界的瑰宝与创新引擎

    风车动漫网,探索动画世界的瑰宝与创新引擎

    在信息爆炸的现代社会,我们有幸拥有一种名为“动漫”的艺术形式,它以独特的视觉语言和丰富的情感内涵,引领我们走进一个充满想象力的奇幻世界,我要向大家介绍的就是这样一个充满活力与创新精神的平台——风车动漫网。风车动漫网,这个名字本身就蕴含着对传