CogVideoX: 重磅升级！图生视频与3D环绕完美结合，为商用AI视频开创未来

大家好！欢迎来到破狼公众号。在AIGC探索的道路上，我将与你一路同行。今天我们深度解析CogVideoX——支持图生视频与3D环绕的前沿AI视频生成模型。CogVideoX的最新进展带来了强大的商业潜力和开源社区生态的升级。以下是这次重磅更新的详细解析。

CogVideoX 是什么？它有哪些功能更新？

CogVideoX 是一个开源视频生成模型，主要通过支持图生视频和文生视频来实现复杂的视频生成。这次升级到1.5版本后，CogVideoX扩展了创造性的边界，比如支持任意长宽比视频生成，以及引入了LORA技术。这些功能使得CogVideoX在复杂场景下提供了更多的视频组合和运镜控制。

什么是 LORA？CogVideoX 怎样利用 LORA 扩展功能？

LORA，即低秩适应。CogVideoX通过发布支持LORA的模型（如运镜模型），赋予用户更大的灵活性来调整和控制视频特效。代表性的运镜LORA模型可以帮助用户在不改变整体视频质量的情况下，增强特定的运镜效果。

如何设置并使用 CogVideoX？

安装步骤

1. 更新 ComfyUI：使用插件管理器Git安装ComfyUI-CogVideoXWrapper插件，模型会在首次运行时自动下载。
2. 注意选择正确的模型：选择CogVideoX-5b-I2V图生视频模型。首次需要下载全部必要文件并将其放置在/ComfyUI/models/CogVideo/CogVideoX-5b-I2V目录下。
3. 运镜LORA模型设置：确保下载orbit_left_lora_weights.safetensors和orbit_up_lora_weights.safetensors，并将它们放入/ComfyUI/models/CogVideo/loras目录中。

使用技巧

• 设置节点：新增一个CogVideoLoraSelectLORA节点，作为运镜LORA的加载器。
• 节约资源：启用CogVideoDecode节点的enable_vae_tiling以减少显存使用。

图生视频实例：如何实现视觉效果的升级？

实例化场景

• 城市上空游动的鲸鱼：通过CogVideoX生成一个鲸鱼在夜空中翱翔的画面，捕捉到巨大的鲸鱼穿过星空与城市灯火交相辉映的震撼瞬间。
• 3D镜头旋转：使用CogVideoX构建一个利用3D环绕技术的视频，展示了落日余晖中旋转灯塔的无与伦比的美景。

感悟

我认为：AI技术的迅速发展为我们提供了更多创作的可能性，以CogVideoX为代表的开源AI工具，正是赋予了普通创作者实现复杂设计的能力。面对技术的进步，我们应当抓住这波浪潮，探索视觉艺术更多的可能性。

CogVideoX, , , , #LORA