解锁流畅动画过渡:AI 驱动的视频放大技术

CN
ComfyUI.org
2025-06-03 09:24:07

用 AI 提升视频质量!学习如何使用 WanVideo 和 NMKD-Siax 模型进行帧插值和视频放大。探索流畅动画过渡与场景形变的无缝工作流程。立即阅读,解锁动画创作的全新可能!

使用场景
Video
适用场景
Video
关键节点
Upscaler
显存
低显存(≤8GB)
阅读时间
4 分钟
更多 Video 工作流

工作流概览

用 AI 提升视频质量!学习如何使用 WanVideo 和 NMKD-Siax 模型进行帧插值和视频放大。探索流畅动画过渡与场景形变的无缝工作流程。立即阅读,解锁动画创作的全新可能!

内容类型: Workflow

主要用途: Download

所需节点

  • Upscaler

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:低显存(≤8GB)。

1. 工作流概述

mbp77fg9skmavpdzpvezgif-78f9b6a73dee8d.gif

该工作流用于基于首尾帧生成中间帧动画,并实现视频超分辨率放大。核心流程包括:

  1. 输入首帧和尾帧图像,通过VACE(Video Auto-Encoding)模型生成中间帧序列。

  2. 使用WanVideo模型进行视频采样和增强。

  3. 最终通过4x_NMKD-Siax超分模型提升分辨率。
    用途:适合制作平滑过渡的动画短片(如角色动作、场景变换)。


2. 核心模型

模型名称

功能说明

来源/安装方式

WanVideo VACE

首尾帧插值生成中间帧

需安装ComfyUI-WanVideoWrapper插件

WanVideo 2.1

视频潜空间生成与增强

同插件内置模型

4x_NMKD-Siax_200k

超分辨率放大(4倍)

通过UpscaleModelLoader节点加载


3. 关键组件

组件名称

功能说明

安装方式

WanVideoVACEStartToEndFrame

接收首尾帧,输出插值帧序列

需手动安装插件

WanVideoSampler

控制视频生成的采样参数

插件内置节点

ImageUpscaleWithModelBatched

批量超分辨率放大

VideoHelperSuite插件

特殊依赖

  • 插件ComfyUI-WanVideoWrapperGitHub链接

  • 模型vace_preview_fp32.safetensorsWan2_1_VAE_bf16.safetensors(需手动下载并放入对应文件夹)


4. 工作流结构

  • Group 1: 首尾帧输入

    • 节点:LoadImageImageResizeKJ

    • 输入:首帧(a111.jpg)和尾帧(a222.jpg)

    • 输出:调整尺寸后的图像(832x480)

  • Group 2: VACE插值生成

    • 节点:WanVideoVACEStartToEndFrameGetImageSizeAndCount

    • 输出:81帧中间序列(5秒动画,16fps)

  • Group 3: 视频采样与解码

    • 节点:WanVideoSamplerWanVideoDecode

    • 参数:采样步数20,CFG=4.0,DPM++调度器

  • Group 4: 超分辨率放大

    • 节点:UpscaleModelLoaderImageUpscaleWithModelBatched

    • 输出:4K分辨率视频(MP4格式,CRF=19)


5. 输入与输出

  • 输入参数

    • 首尾帧图像(支持JPG/PNG)

    • 提示词(如"一位美女练习瑜伽动作")

    • 帧数(默认81帧)、分辨率(832x480)

  • 输出结果

    • 超分后的MP4视频(文件名前缀xiao


6. 注意事项

⚠️ 显存需求:至少8GB VRAM,建议使用RTX 3060及以上显卡。
⚠️ 常见错误

  • 显存不足时报错module 'comfy.model_management' has no attribute 'is_directml_enabled' → 降低帧数或分辨率。

  • 超分阶段OOM → 禁用ImageUpscaleWithModelBatched或改用2x模型。
    ⚠️ 优化建议

  • 首尾帧尺寸需一致,推荐512x512或768x432。

  • 动画帧数超过100帧时,启用WanVideoTeaCache减少显存占用。


实际演示

  1. 替换LoadImage节点的图片路径为您的首尾帧。

  2. 修改WanVideoTextEncode中的提示词(中英文均可)。

  3. 点击Queue Prompt生成,最终视频保存在ComfyUI/output文件夹。

常见问题