动漫视频魔法:释放 WAN2.1 的潜力,打造惊艳视觉效果

CN
ComfyUI.org
2025-05-06 11:42:14

使用阿里巴巴的 WAN2.1 模型将 2D 动漫角色转化为动态视频!学习如何通过该工作流程实现带有镜头运动的惊艳视频效果,立即开始你的图像转视频创作之旅吧!

使用场景
Video
适用场景
Video
模型
Wan2.1
关键节点
Upscaler
显存
低显存(≤8GB)
阅读时间
3 分钟
查看所需模型更多 Video 工作流

工作流概览

使用阿里巴巴的 WAN2.1 模型将 2D 动漫角色转化为动态视频!学习如何通过该工作流程实现带有镜头运动的惊艳视频效果,立即开始你的图像转视频创作之旅吧!

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1

所需节点

  • Upscaler

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:低显存(≤8GB)。

1. 工作流概述

macfxkiarfambgc79vddb8a960fb80e565f2faf2ada02f131696bac4539c3aed6b2d0740373bb5ce9f.gif

该工作流基于通义万相WAN2.1模型,实现图生视频(I2V)功能,输入一张二次元风格的骑行角色图片,生成动态视频(如女孩骑自行车、镜头跟随运动的场景)。

  • 核心模型

    • Wan2.1-I2V-14B:通义自研视频生成模型,支持480P分辨率。

    • UMT5-XXL:多语言文本编码器,处理中文提示词。

    • OpenCLIP-ViT-H:图像编码器,解析输入图片内容。

2. 组件说明

关键节点

组件名称

功能说明

安装方式

WanVideoModelLoader

加载WAN2.1视频模型(需fp8_e4m3fn格式)

需手动下载模型并放入models文件夹

WanVideoTextEncode

处理中英文提示词(如“骑行,女孩骑自行车”)

依赖ComfyUI-WanVideoWrapper插件

WanVideoImageClipEncode

将输入图像编码为模型可理解的向量

同上

RIFE VFI

视频帧插值(补帧),提升流畅度

通过ComfyUI Manager安装RIFE插件

VHS_VideoCombine

合并图像序列为MP4视频

安装VideoHelperSuite插件

特殊依赖

  • 模型文件需手动下载:

    • Wan2_1-I2V-14B-480P_fp8_e4m3fn.safetensors(主模型)

    • umt5-xxl-enc-bf16.safetensors(文本编码器)

    • 存放路径:ComfyUI/models/wan_video/

3. 工作流结构

按功能分为7个Group:

  1. 加载图像:输入角色图片(如00028-2257557710.png)。

  2. 模型加载:加载WAN2.1模型、VAE、文本编码器。

  3. 提示词处理:输入正向/负向提示词(如“第三人称视角,速度感”)。

  4. 视频生成:通过WanVideoSampler生成潜在空间视频帧。

  5. 后处理:降噪、分辨率调整(CR Upscale Image)。

  6. 视频合成:合并帧为MP4(VHS_VideoCombine)。

  7. 补帧优化:使用RIFE VFI插值提升帧率至32FPS。

4. 输入与输出

  • 输入

    • 图像:480x768像素的二次元角色图(PNG格式)。

    • 提示词:中文描述场景(如“道路两旁花草繁茂”)。

    • 参数:帧率(16→32FPS)、CFG值(8.0)、采样步数(30)。

  • 输出

    • MP4视频(默认保存为xiao.mp4)。

5. 注意事项

  • 显存要求:需≥16GB GPU显存(建议使用bf16精度降低消耗)。

  • 常见错误

    • 模型缺失报错 → 检查wan_video文件夹路径。

    • 插帧失败 → 确保rife47.pth文件已放入ComfyUI/models/rife/

  • 优化建议

    • 降低输出分辨率(如360P)以减少显存占用。

    • 关闭experimental_args中的冗余功能提升速度。

常见问题