掌握视频创作:首帧/末帧生成与增强工作流

CN
ComfyUI.org
2025-04-07 16:01:51

解锁惊艳的视频生成与增强体验!探索一个强大的工作流,从首帧/末帧图像创建动态视频,包含 4 倍超分辨率、10 倍插帧与自动标注功能。立即尝试!

使用场景
Video
适用场景
Video
模型
Wan2.1
显存
低显存(≤8GB)
阅读时间
3 分钟
查看所需模型更多 Video 工作流

工作流概览

解锁惊艳的视频生成与增强体验!探索一个强大的工作流,从首帧/末帧图像创建动态视频,包含 4 倍超分辨率、10 倍插帧与自动标注功能。立即尝试!

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1

所需节点

  • Animatediff
  • Upscaler

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:低显存(≤8GB)。

1. 工作流概述

m979hc6ynecrqlvvre9d98095e7f27d7d4eceaf03bf189d90abbf8cd06cdad558ccbc266d1518dfbc8e.gif

该工作流专为首尾帧视频生成与增强设计,核心功能包括:

  • 基于首帧和尾帧图像生成动态视频

  • 支持4倍超分辨率放大(使用4xRealWebPhoto_v4模型)

  • 视频插帧(使用RIFE VFI实现10倍补帧)

  • 自动添加帧标签(如"start_frame"/"end_frame")

  • 输出MP4/GIF双格式

2. 核心模型

模型名称

功能说明

来源/安装方式

Wan2.1-Fun-InP-14B

视频生成主模型(FP8量化)

需手动下载.safetensors文件

umt5-xxl-enc-bf16

多语言文本编码器

通过LoadWanVideoT5TextEncoder加载

4xRealWebPhoto_v4

图像超分模型

ComfyUI Manager搜索安装

RIFE 4.7

光流补帧模型

需下载rife47.pth权重文件

3. 关键组件

组件名称

功能说明

安装方式

WanVideoImageToVideoEncode

将首尾帧编码为视频潜在空间

内置节点

WanVideoSampler

控制视频生成的采样过程

需安装ComfyUI-WanVideoWrapper

RIFE VFI

视频帧插值(10倍补帧)

需安装ComfyUI-VideoHelperSuite

ImageResizeKJ

动态调整输入图像分辨率

需安装ComfyUI-KJNodes

4. 工作流结构

  • Group 1: 首帧处理

    • 输入:1288x1024 PNG图像

    • 节点:LoadImageImageResizeKJ(调整为480x640) → AddLabel(添加"start_frame"标签)

  • Group 2: 尾帧处理

    • 输入:1288x1024 PNG图像

    • 节点:LoadImageImageResizeKJAddLabel(添加"end_frame"标签)

  • Group 3: 视频生成

    • 核心节点:WanVideoSampler(30步采样,UniPC调度器) → WanVideoDecode(解码为图像序列)

  • Group 4: 后处理

    • 超分:ImageUpscaleWithModel(4x放大)

    • 补帧:RIFE VFI(插值10帧)

    • 输出:VHS_VideoCombine(MP4 16fps + GIF 32fps)

5. 输入与输出

  • 输入参数

    • 必填:首尾帧图像(支持拖拽上传)

    • 可选:种子值(默认999)、提示词(如"换衣服")、负面提示词(内置质量过滤)

  • 输出结果

    • output.mp4(H.264编码,16fps)

    • AnimateDiff.gif(32fps循环动画)

6. 注意事项

  • 显存需求:建议≥16GB GPU(FP8模型优化后仍需约12GB)

  • 常见错误

    • 图像尺寸不匹配时需检查ImageResizeKJ节点参数

    • RIFE补帧失败需确认rife47.pth模型路径

  • 性能优化

    • 启用torch.compile加速(已配置inductor模式)

    • 使用easy cleanGpuUsed节点手动释放显存

常见问题