解锁无限可能:Wan2.1-VACE 视频画面扩展工作流全解析

CN
ComfyUI.org
2025-05-29 06:35:24

使用阿里巴巴推出的 Wan2.1-VACE 视频编辑模型,开启智能视频画面扩展(Outpainting)新时代。通过 AI 驱动,实现画面比例拓展、动态内容生成与风格一致性控制,为视频创作带来前所未有的灵活性与创意空间。

模型
Wan2.1
显存
高显存(24GB+)
阅读时间
2 分钟
查看所需模型

工作流概览

使用阿里巴巴推出的 Wan2.1-VACE 视频编辑模型,开启智能视频画面扩展(Outpainting)新时代。通过 AI 驱动,实现画面比例拓展、动态内容生成与风格一致性控制,为视频创作带来前所未有的灵活性与创意空间。

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:高显存(24GB+)。

1. 工作流概述

mbko1hv61i21k6vupgs图片压缩19+.jpeg

该工作流是专为视频内容扩展(Outpainting)设计的AI视频处理系统,基于阿里巴巴PAI团队的Wan2.1-VACE模型,可实现:

  • 视频画幅智能扩展(如16:9→宽屏)

  • 动态内容生成(如爆炸/特效添加)

  • 多分辨率适配(480p至4K)

2. 核心模型

模型名称

作用

关键特性

Wan2_1_VAE_bf16.safetensors

视频专用VAE编码器

支持BF16精度加速

umt5-xxl-enc-bf16.safetensors

多语言文本编码器

适配中文长文本描述

vace_preview_fp32.safetensors

视频内容分析模型

实时生成遮罩和运动轨迹

3. 关键组件

  • WanVideoBlockSwap (节点3)
    动态内容替换控制器,支持20帧块交换
    ▶ 需安装ComfyUI-WanVideoWrapper扩展

  • WanVideoVACEEncode (节点6)
    视频特征编码器,支持832x480@29fps处理
    ▶ 依赖WANVAE和输入遮罩

  • ImagePadKJ (节点23)
    智能边缘填充,自动扩展至目标分辨率
    ▶ 提供128px安全边距

4. 工作流流程

  1. 输入阶段

    • 加载原始视频(如摩托车行驶MP4)

    • 通过VHS_LoadVideo拆帧

  2. 预处理阶段

    • 生成动态遮罩(MaskToImage)

    • 文本描述编码("一辆摩托车在行驶并爆炸")

  3. 生成阶段

    • VACE模型分析视频特征

    • 使用WanVideoSampler(20步,unipc)生成扩展内容

  4. 输出阶段

    • 输出H.264编码视频(CRF19)

5. 核心参数(Python)

{
  "基础分辨率": "832x480",
  "帧率": 16fps,
  "采样器": "unipc @ 20步",
  "扩展边距": "128px",
  "批处理大小": 29帧/批次
}

6. 使用技巧

⚠️ 必要准备

💡 创作建议

  • 修改String Literal节点文本改变生成内容

  • 调整WanVideoBlockSwapblock_size参数控制内容替换粒度

常见问题