探索物体分割视频的创作流程

CN
ComfyUI.org
2025-04-28 10:59:33

使用基于 Wan2.1 的视频生成工作流程,创建令人惊叹的对象分割视觉效果。学习如何通过单个图像 + 文本提示生成动态视频,并使用 LoRA 微调和后处理技术进行自定义。立即开始!

使用场景
Video
适用场景
Video
关键节点
Upscaler
显存
中等显存(12–16GB)
阅读时间
3 分钟
查看所需模型更多 Video 工作流

工作流概览

使用基于 Wan2.1 的视频生成工作流程,创建令人惊叹的对象分割视觉效果。学习如何通过单个图像 + 文本提示生成动态视频,并使用 LoRA 微调和后处理技术进行自定义。立即开始!

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1
  • Lora

所需节点

  • Upscaler

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:中等显存(12–16GB)。

1. 工作流概述

ma0yw59ikhlox7kb14ka6b59157a1eb927469bf78ba0f50a16f59877f41a409565f708effe729cdafe6.gif

这是一个基于通义万相Wan2.1模型视频生成工作流,专门用于创建物体分裂特效动画(如物体爆炸、碎片化等动态效果)。核心功能包括:

  • 输入单张图片 + 文本提示,生成高动态视频

  • 支持LoRA微调(如分裂复制、万物开花等特效风格)

  • 可选视频超分辨率放大和补帧(FILM VFI)

2. 核心模型

模型名称

功能

来源

Wan2.1-I2V-14B

基础图像生成视频模型

需手动下载 Wan2_1-I2V-14B-480P_fp8_e4m3fn.safetensors

umt5-xxl-enc

多语言文本编码器

内置

Wan2.1-分裂复制-LoRA

控制物体分裂特效风格

需单独下载

3. 关键组件

组件名称

功能

安装方式

WanVideoModelLoader

加载视频生成主模型

通过ComfyUI-WanVideoWrapper插件安装

WanVideoLoraSelect

选择分裂特效LoRA

同插件内置

FILM VFI

视频补帧(提升流畅度)

需安装ComfyUI-Frame-Interpolation

VHS_VideoCombine

视频合成输出

需安装ComfyUI-VideoHelperSuite

4. 工作流结构

Group 1: 视频生成区

  • 输入:图片 + 提示词(如"物体爆裂成碎片")

  • 输出:480P原始视频

  • 关键参数:总帧数(默认81)、分辨率(768x自适应)

Group 2: 视频后处理

  • 功能:超分辨率放大(4xFaceUpSharpDAT模型) + 补帧(FILM VFI插值10倍)

  • 注意:需降低原始帧数/分辨率以避免显存不足

5. 输入与输出

输入参数:

  • positive_prompt: 描述分裂效果的文本(如"美女旋转爆裂成碎片")

  • num_frames: 视频总帧数(建议≤81)

  • generation_width: 视频宽度(建议≤768)

输出结果:

  • MP4格式视频(H.264编码,默认16FPS)

6. 注意事项

  1. 显存需求:至少12GB GPU(生成480P视频)

  2. 常见错误

    • 报错module 'comfy.model_management' → 显存不足,需减少帧数

    • 补帧失败 → 关闭FILM VFI或降低插值倍数

  3. LoRA切换:在WanVideoLoraSelect节点选择不同特效风格

常见问题