AI视频创作迎来新纪元:昆仑万维SkyReels-V2无限时长视频生成模型重磅开源! , , #昆仑万维
一、为什么AI视频创作需要无限时长?
你是否曾因AI视频的时长限制而感到束手束脚?是否苦恼于闭源模式带来的高成本?昆仑万维重磅开源的SkyReels-V2和SkyReels-A2模型,或许能彻底改变这一现状。这两款模型直接登顶开源界的SOTA宝座,为AI视频创作带来了前所未有的自由度。
二、SkyReels-V2有哪些令人兴奋的功能?
有幸提前体验了SkyReels-V2的内测版本,发现它简直集市面上所有实用功能于一身:
- 视频首尾帧生成:精准控制视频的开头和结尾,让你的创意表达更加完整。
- 视频无限延长:突破时长限制,打造史诗级AI视频作品。
- 效果LoRA训练:定制专属视频风格,让你的作品与众不同。
- 多主体参考:轻松融合多个元素,创造出更丰富的场景。
- 口型同步:让AI视频中的人物对话更加自然逼真。
- 一键生成短剧故事板:快速构建短剧框架,激发你的创作灵感。
SkyReels-V2开源地址:github.com/SkyworkAI/SkyReels-V2
三、SkyReels-V2基础视频生成效果如何?
SkyReels-V2网站上体验的基础视频生成功能,支持一次性生成5秒、10秒、30秒镜头。其中,30秒单镜头生成是SkyReels的独家功能。更长的视频可以通过Extend功能进行无限延长。目前支持16:9和9:16两种视频比例,并拥有首尾帧生成功能。
3.1 案例展示:
- 动物镜头:视频画质清晰,动物动作符合真实世界的运动规律,10秒视频的画面细节处理到位,没有明显错误。
- 人物镜头:人物动作和表演自然,与环境互动良好,AI视频中常见的手部崩坏问题得到解决。例如,提示语“喝茶然后放下茶杯露出微笑”的连续动作也能流畅展现。
- 30秒镜头:海底遨游的案例中,沉船内外过渡自然,前后画面一致性强。
四、如何使用SkyReels-V2进行视频无限延长?
视频无限延长是SkyReels-V2的亮点功能。你可以在基础视频生成中获得5秒、10秒、30秒的视频,然后通过Extend功能进行单次5秒的延长,且不限制次数,从而生成无限时长的视频。
4.1 操作步骤:
- 在基础视频生成中,生成一段你想要的视频。
- 进入Extend功能。
- 上传你生成的视频。
- 根据需要修改提示语,控制视频的后续走向。
- 点击生成,即可获得延长后的视频。
- 重复步骤3-5,即可无限延长视频。
4.2 案例展示:
- 40秒狐狸视频:狐狸的动作和腿部没有出现问题,画面细节保持稳定。
- 海底视频:鱼的出现和消失合理,没有出现元素突然消失融合扭曲的现象。
- 情绪变化控制:通过提示语控制人物情绪变化,过渡自然,无需剪辑拼接。
五、如何使用SkyReels-V2进行效果LoRA训练?
通过效果LoRA训练,你可以上传10-20个拥有相同效果的5秒视频作为素材,训练一个自己想要的效果或动作LoRA,然后应用到后续的视频中。
5.1 操作步骤:
- 准备10-20个具有相同效果的5秒视频。
- 上传这些视频到SkyReels-V2的LoRA训练界面。
- 等待模型训练完成。
- 选择生成的LoRA效果。
- 在视频生成中使用该LoRA,即可获得具有特定效果的视频。
5.2 案例展示:
上传10个野马分鬃的动作素材,炼制一个太极拳LoRA,即可生成全民打太极拳的系列视频。
六、如何使用SkyReels-V2进行多主体参考?
多主体参考功能支持上传4张以内的图片,然后通过提示语固定画面展现的内容。
6.1 操作步骤:
- 准备4张以内的图片,这些图片包含你希望在视频中出现的元素。
- 上传这些图片到SkyReels-V2的多主体参考界面。
- 输入提示语,描述你希望视频展现的内容。
- 点击生成,即可获得融合了图片元素和提示语描述的视频。
6.2 案例展示:
上传三张包含人物、道具和场景的图片,可以生成元素融合合理、人物道具和场景复现度高的视频。
七、如何使用SkyReels-V2一键生成故事板?
SkyReels-V2提供一键生成剧本、角色、故事板分镜,分镜生成视频的功能。整个过程流畅,中间步骤支持随时修改,分镜人物角色的一致性较好。
7.1 操作步骤:
- 进入SkyReels-V2的一键生成故事板界面。
- 根据提示输入剧本或选择预设剧本。
- 系统将自动生成角色和故事板分镜。
- 你可以随时修改剧本、角色和分镜。
- 点击生成视频,即可获得由故事板分镜生成的视频。
八、总结:SkyReels-V2的意义与价值
SkyReels-V2的功能全面且效果出色,开源模式降低了AIGC的创作门槛,推动了整个视频生成领域的进化速度。它为创作者提供了更大的操作空间,让AI视频创作变得更加自由和高效。
我认为:这开源的烈火,烧尽了闭源的藩篱,燃起了人人皆可创作的希望。