解锁流畅视频合成工作流程指南

CN
ComfyUI.org
2025-04-22 11:17:47

使用AI模型生成高质量角色图像并实现360°旋转动画。学习完整工作流程并安装关键节点,享受流畅体验。

使用场景
Video
适用场景
Video
显存
低显存(≤8GB)
阅读时间
4 分钟
查看所需模型更多 Video 工作流

工作流概览

使用AI模型生成高质量角色图像并实现360°旋转动画。学习完整工作流程并安装关键节点,享受流畅体验。

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1
  • Lora

所需节点

  • FaceDetailer
  • Upscaler

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:低显存(≤8GB)。

1. 工作流概述

m9sew6mlysz2xj0vhbr7360686e8f30b1012b1eac3081109237225b26b49a9c6327a696dcd7dc365f7c.gif

该工作流用于生成高质量人物图像,并通过360度旋转动画展示动态效果。核心功能包括:

  • 人物生成:基于输入图片或文本提示生成写实或动漫风格人物。

  • 视频合成:将生成的图像序列转换为平滑的旋转动画。

  • 后处理优化:包括超分辨率放大、帧插值(提升流畅度)和面部细节修复。

核心模型

模型名称

功能

来源

Wan2.1-I2V-14B

基础视频生成模型

网易开源

360度旋转lora_flux

控制角色旋转动作

定制LoRA(需手动安装)

8x_NMKD-Faces

人脸超分辨率放大

CivitAI

GIMM-VFI

视频帧插值(提升流畅度)

GitHub插件


2. 关键组件与安装

核心节点

  1. WanVideoModelLoader

    • 作用:加载视频生成基础模型(如Wan2.1-I2V-14B)。

    • 安装:需通过ComfyUI Manager安装ComfyUI-WanVideoWrapper插件。

    • 依赖模型:从网易官方获取模型文件,放入models/wan_video文件夹。

  2. WanVideoLoraSelect

    • 作用:加载旋转控制的LoRA(如360度旋转lora_flux)。

    • 安装:需将LoRA文件放入models/loras文件夹。

  3. GIMMVFI_interpolate

    • 作用:视频帧插值(补帧)。

    • 安装:通过GitHub安装ComfyUI-GIMM-VFI插件。

  4. FaceDetailer

    • 作用:自动修复生成图像的面部细节。

    • 安装:内置节点,需搭配UltralyticsDetectorProvider(YOLO模型)。


3. 工作流结构

Group 1: 人物生成

  • 输入

    • 图片(通过LoadImage上传)或文本提示(如“1girl, fashion model”)。

    • 参数:分辨率(默认512x768)、种子值、采样步数(20步)。

  • 输出:生成的人物图像(PNG格式)。

Group 2: 360度旋转动画

  • 输入

    • 生成的人物图像 + 旋转LoRA。

    • 参数:帧率(16fps)、旋转角度控制(通过WanVideoBlockSwap调整)。

  • 输出:旋转动画视频(MP4格式)。

Group 3: 后处理优化

  • 节点

    • CR Upscale Image:超分辨率放大(8x)。

    • GIMMVFI_interpolate:补帧至32fps。

    • VHS_VideoCombine:最终视频合成。


4. 输入与输出

输入参数:(json

{
  "prompt": "1girl, 亚洲时尚模特",  
  "negative_prompt": "低质量, 模糊",  
  "seed": -1,  // 随机种子  
  "width": 512,  
  "height": 768  
}

输出结果

  • 视频文件:/ComfyUI/output/XIAO_xxxx.mp4(H.264编码)。


5. 注意事项

  1. 模型依赖

    • 需下载Wan2.1系列模型(约14GB),确保显存≥16GB(推荐24GB)。

    • 缺少LoRA时会报错LORA not found,检查文件名是否匹配。

  2. 性能优化

    • 使用--highvram参数运行ComfyUI。

    • 关闭其他Group(如人物生成)以节省资源。

  3. 常见错误

    • 分辨率不匹配:需通过ImageResizeKJ节点统一尺寸。

    • 显存不足:启用PurgeVRAM节点清理缓存。

常见问题