使用 AI 创建可爱的猫咪视频:低 VRAM 工作流程

CN
ComfyUI.org
2025-04-18 11:10:50

使用这个工作流程将静态图像转化为可爱的猫咪视频!学习如何利用低 VRAM 和快速本地处理创建高质量的 MP4 视频。探索图像转视频、超分辨率和帧插值的强大功能。

使用场景
Video
适用场景
Video
模型
Wan2.1
关键节点
Upscaler
显存
低显存(≤8GB)
阅读时间
3 分钟
查看所需模型更多 Video 工作流

工作流概览

使用这个工作流程将静态图像转化为可爱的猫咪视频!学习如何利用低 VRAM 和快速本地处理创建高质量的 MP4 视频。探索图像转视频、超分辨率和帧插值的强大功能。

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1

所需节点

  • Upscaler

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:低显存(≤8GB)。

1. 工作流概述

m9mov5ynccpccpxgcuf9b0fae954779bc1629607add2bb40472f16eefce2b6a4d3fa8be5722da212c2.png

该工作流用于快速生成萌猫主题的短视频,支持从静态图像生成动态视频(图生视频)。核心功能包括图像超分辨率、帧插值(提升流畅度)、视频增强,最终输出高清晰度的MP4格式视频。设计目标是实现低显存消耗(通过GGUF量化模型)和快速本地化处理

2. 核心模型

模型名称

功能描述

wan2.1-i2v-14b-480p-Q6_K.gguf

量化版图生视频模型,低显存需求(约6GB)

umt5_xxl_fp8_e4m3fn_scaled

多语言文本编码器,用于生成视频条件提示

4x-ClearRealityV1.pth

超分辨率模型,提升输出画质

rife49.pth

帧插值模型(RIFE),用于补帧使视频更流畅

3. 关键组件

3.1 必须安装的节点

  • ComfyUI-GGUF:用于加载量化模型(通过ComfyUI Manager安装)。

  • ComfyUI-Frame-Interpolation:帧插值插件(需手动安装GitHub仓库)。

  • ComfyUI-VideoHelperSuite:视频合成工具(支持MP4输出)。

3.2 特殊依赖

  • 模型文件

    • 下载 wan2.1-i2v-14b-480p-Q6_K.gguf 放入 models/gguf

    • 下载 4x-ClearRealityV1.pthrife49.pth 放入 models/upscale_modelsmodels/frame_interpolation

4. 工作流结构

Group名称

输入参数

输出结果

功能说明

文本编码

正面/负面提示词

条件向量

控制视频生成风格(如“萌猫+广角”)

图像预处理

输入图像(512x768)

缩放后图像

适配视频生成分辨率

图生视频

图像+条件+VAE

初始视频 latent

调用Wan模型生成低分辨率视频

视频增强

初始 latent

高分辨率 latent

超分辨率+补帧(30fps)

视频合成

增强后图像序列

最终MP4视频

添加元数据并保存

5. 输入与输出

  • 输入

    • 必填:萌猫图像(建议512x768)、正面提示词(如“水汪汪大眼睛”)。

    • 可选:负面提示词(默认包含低质量过滤)、种子值。

  • 输出:MP4视频(默认720p,30fps,H.264编码)。

6. 注意事项

  1. 显存优化:使用GGUF量化模型后,显存需求可降至6GB,但生成速度较慢。

  2. 帧率控制:修改 RIFE VFI 节点的插帧数(默认10帧)可平衡流畅度与性能。

  3. 错误排查:若缺少CLIP模型,检查 umt5_xxl_fp8_e4m3fn_scaled.safetensors 是否放入 models/clip

常见问题