2月18日，昆仑万维开源中国首个面向AI短剧创作的视频生成模子SkyReels-V1、中国首个SOTA级别基于视频基座模子的颜料手脚可控算法SkyReels-A1。

开源地址：

1、SkyReels-V1：https://github.com/SkyworkAI/SkyReels-V1

2、SkyReels-A1：https://github.com/SkyworkAI/SkyReels-A1

3、技艺诠释：https://skyworkai.github.io/skyreels-a1.github.io/report.pdf

4、SkyReels官方地址：skyreels.ai

1. SkyReels-V1：Human-Centric Video Foundation Model，中国首个面向AI短剧创作的开源视频生成模子

SkyReels-V1可兑现影视级东说念主物微颜料饰演生成，撑捏33种考究东说念主物颜料与400+种当然手脚组合，高度复原真情面感抒发。正如以下视频所示，SkyReels-V1撑捏生成大笑、咆哮、诧异、哽咽等微颜料，展现出东说念主物心扉丰沛的饰演细节。即使有大幅度肢体手脚，SkyReels-V1生成的微颜料也好意思满贴合东说念主物肢体饰演。

    

同期，SkyReels-V1为AI视频生成带来了电影级光影好意思学，基于好莱坞级的高质地影视数据查验，刻下SkyReels生成的每一帧画面，在构图、演员站位、相机角度等齐具备电影级的质感。岂论是单东说念主镜头饰演细节，已经多东说念主构图，刻下已具备精确的颜料独揽和高质感画面。

更进军的是，SkyReels-V1不仅撑捏文生视频、还能撑捏图生视频，是开源视频生成模子中参数最大的撑捏图生视频的模子，在同瓜区别率下各神色的兑现开源SOTA。

    

图1丨SkyReels-V1文生视频办法对比(起头：昆仑万维SkyReels)

简略兑现这么的SOTA级别，不仅依赖于昆仑万维SkyReels团队基于自研的高质地数据清洗和东说念主工标注管线，构建了千万级的高质地电影&电视剧&记录片数据。更依托团队自研「Human-Centric」的视频融会多模态大模子，大幅普及视频中东说念主物关连的融会智商，尤其是自研东说念主物智能成见系统。

总而言之，收成于塌实的数据职业和先进的东说念主物智能成见系统，SkyReels-V1不错兑现：

影视化颜料识别体系：11种针对影视戏剧中的东说念主物颜料融会，如不屑、不巩固、无助、厌恶等颜料的融会；

东说念主物空间位置感知：基于东说念主体三维重建技艺，兑现对视频中多东说念主的空间相对关系融会，助力模子生成影视级东说念主物站位；

行径意图融会：构建跳动400种行径语义单位，兑现对东说念主物行径的精确融会；

饰演场景融会：兑现东说念主物-服装-场景-剧情的关联分析。

SkyReels-V1不仅是全球少许数开源的视频生成模子，已经围绕东说念主物饰演、开源视频生成模子中性能最强的。

在自研推理优化框架「SkyReels-Infer」的加捏下，大幅普及推理效果，兑现544p区别率，推理基于单台4090只需80s，还撑捏散播式多卡并行，撑捏Context Parallel，CFG Parallel，和 VAE Parallel。此外，罗致fp8 quantization以及parameter-level offload，满足低显存用户级显卡运转需求；撑捏flash attention、SageAttention，模子编译优化等，进一步优化蔓延；基于开源diffuser库，普及易用性。

正如下图2所示，在同等RTX4090资源情况下对比(4卡)，SkyReels-Infer版块比HunyuanVideo官方版块端到端蔓延减少58.3%(293.3s vs 464.3s)；SkyReels-Infer版块具备更鲁棒的部署战略，撑捏用户级别显卡1卡-8卡的推理部署。

    

图2丨推理生成544p视频，使用交流卡数的RTX 4090，SkyReels-Infer版块端到端蔓延优于HunyuanVideo官方(xdit) 58.3%

在同等A800资源情况下对比，SkyReels-Infer版块比HunyuanVideo官方版块端到端蔓延减少14.7%～28.2%(如图3所示)，SkyReels-Infer版块具备更鲁棒的多卡部署战略。

    

图3丨推理生成544p视频，SkyReels-Infer版块具备更鲁棒的多卡部署战略，撑捏8卡部署

2.SkyReels-A1：首个SOTA级别的基于视频基座模子的颜料手脚可控算法

为了兑现愈加精确可控的东说念主物视频生成，昆仑万维还开源了SOTA级别的基于视频基座模子的颜料手脚可控算法SkyReels-A1，对标Runway的Act-One，SkyReels-A1撑捏视频驱动的电影级颜料捕捉，兑现高保真微颜料复原。简略基于猖狂东说念主体比例(包括肖像、半身及全身构图)生成高度传神的东说念主物动态视频，其真确感源自对东说念主物颜料变化和脸色的精确模拟、皮肤肌理、身体手脚侍从等多维度细节的深度复原。

SkyReels-A1不仅撑捏侧脸的颜料独揽生成、还能兑现愈加传神的眉眼微颜料生成和更大幅度的头部与当然身体手脚。SkyReels-A1简略兑现更大幅度的东说念主物颜料驱动。比拟Runway的Act-One，SkyReels-A1不错挪动更复杂的颜料手脚，生成的东说念主物面部面孔不错妥洽肢体及画面本体兑现更活灵活现的饰演。

3.以开源之姿，以破局之势，昆仑万维力图于股东全球AI短剧创作生态振作发展

昆仑万维一直坚捏开源，股东技艺平权。昆仑万维同期将SOTA级别的SkyReels-V1和SkyReels-A1进行开源，是AI短剧行业首例，亦然昆仑万维SkyReels回馈行业迈出的一小步，更是促进AI短剧创作和视频生成行业枝繁叶茂的一大步。

咱们折服在进行推理优化的升级和可控算法的开源后，它们将为用户带来低本钱、可控性更强的AIGC智商。昆仑万维但愿通过更多优秀视频生成模子的开源和极致的AI短剧产物智商，为用户带来低本钱兑现AI短剧创作的可能性、约束行业当今视频生成一致性差的问题，让各人通过我方的电脑生成精细且可控的东说念主物饰演。

这次开源的视频大模子，不仅是一次技艺约束，有助于减轻全球本体产业的数字范畴，更是文化产业分娩力的一次立异。异日，短剧与游戏、诬捏执行等规模的跨界发展，将会加快产业会通。AI短剧也有但愿从“技艺实验”迈向“主流创作”，成为全球文化输出的新载体。

“兑现通用东说念主工智能，让每个东说念主更好地塑造和抒发自我”是公司的责任，异日，昆仑万维及SkyReels还将开源更多视频生成模子和算法、通用模子，通过开源兑现AGI平权现金九游体育app平台，股东AI短剧生态的捏续设立和振作，促进开源社区、开荒生态以及AI行业的发展。