让植物生长栩栩如生:深入解析 WAN2.1 I2V 工作流程

CN
ComfyUI.org
2025-04-16 10:26:44

用 AI 生成惊艳的植物生长延时视频!了解如何使用基于 WAN2.1 模型的工作流程,从一张图片创造出逼真的生长效果。

使用场景
Video
适用场景
Video
显存
高显存(24GB+)
阅读时间
4 分钟
查看所需模型更多 Video 工作流

工作流概览

用 AI 生成惊艳的植物生长延时视频!了解如何使用基于 WAN2.1 模型的工作流程,从一张图片创造出逼真的生长效果。

内容类型: Workflow

主要用途: Download

所需模型

  • Wan2.1
  • Lora

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:高显存(24GB+)。

工作流概述

m9jshlo20154rjvpdnt5kf9fced0f7194b600791497a5d824f32836a16a956de55fe836f6a1f633b671f5.gif

这是一个基于WAN2.1模型的图像转视频工作流,专门用于生成植物生长过程的动态视频效果。工作流从单张输入图像出发,通过AI模型生成植物在物体表面逐渐生长覆盖的延时摄影效果视频。

核心模型

  1. WAN2.1-I2V模型:主模型"Wan2_1-I2V-14B-480P_fp8_e4m3fn.safetensors",负责图像到视频的转换

  2. 植物生长LoRA:"Wan2.1-植物生长-FDGrowth_v4",专门优化植物生长效果

  3. T5文本编码器:"umt5-xxl-enc-bf16.safetensors",处理文本提示

  4. CLIP视觉模型:"open-clip-xlm-roberta-large-vit-huge-14_visual_fp32.safetensors",处理图像嵌入

关键组件说明

  1. WanVideoModelLoader:加载WAN视频模型

    • 安装:通过ComfyUI-WanVideoWrapper安装

    • 需要下载模型文件到指定目录

  2. WanVideoLoraSelect:选择植物生长专用LoRA

    • 权重设为0.9,平衡原模型与LoRA效果

  3. WanVideoTextEncode:文本编码节点

    • 输入特定触发词:"fdgr0w"开头的植物生长描述

    • 包含详细的负面提示词列表

  4. WanVideoSampler:视频采样器

    • 使用unipc采样方法

    • 30步采样,CFG值6

  5. VHS_VideoCombine:视频合成

    • 输出MP4格式,16fps

    • 使用yuv420p像素格式

工作流结构

  1. 模型加载组

    • 加载WAN主模型、VAE、T5文本编码器和CLIP视觉模型

    • 选择植物生长LoRA

  2. 输入处理组

    • 加载输入图像(如"A (13).jpeg")

    • 调整图像分辨率(建议480×832)

  3. 提示词组

    • 处理植物生长描述文本

    • 示例提示词包含详细生长过程描述

  4. 视频生成组

    • 控制视频帧数(建议33/41/49帧)

    • 设置采样参数

  5. 输出组

    • 解码视频帧

    • 合成最终MP4视频

输入与输出

输入参数

  • 输入图像(建议分辨率480×832)

  • 植物生长描述提示词

  • 视频帧数(33/41/49)

  • 随机种子(593617810391093)

输出结果

  • MP4格式视频(16fps)

  • 文件名前缀"GrowA"

注意事项

  1. 显存要求高,建议使用至少12GB显存显卡

  2. 显存不足时可调整"blocks to swap"参数(默认5,可提高至20-30)

  3. 使用特定触发词"fdgr0w"开头才能激活植物生长效果

  4. 推荐分辨率:512×512、576×576、480×832或832×480

  5. 包含GPU清理节点(easy cleanGpuUsed)防止显存泄漏

常见问题