解锁高级图像合成:FLUX ControlNet V3.0 工作流

CN
ComfyUI.org
2025-06-06 11:39:35

解锁 FLUX ControlNet V3.0 的高级图像合成能力!通过结合 HED、深度图和 Canny 边缘预处理,实现对生成图像的精确控制。探索核心功能、关键模型以及安装详情。立即开始体验!

关键节点
Controlnet
显存
中等显存(12–16GB)
阅读时间
5 分钟
查看所需模型

工作流概览

解锁 FLUX ControlNet V3.0 的高级图像合成能力!通过结合 HED、深度图和 Canny 边缘预处理,实现对生成图像的精确控制。探索核心功能、关键模型以及安装详情。立即开始体验!

内容类型: Workflow

主要用途: Download

所需模型

  • Flux
  • Controlnet
  • Sd

所需节点

  • Controlnet

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:中等显存(12–16GB)。

1. 工作流概述

mbkqh86v8h9orm5r2r9图片压缩添加标题 (26).png

该工作流是一个基于 FLUX ControlNet V3.0 的多条件控制生成流程,结合了 HED软边缘检测Depth深度图Canny边缘检测 三种ControlNet预处理方式,用于高精度控制图像生成的构图和风格。最终输出为符合输入图像结构和提示词内容的AI生成图像。

核心功能

  • 支持 多ControlNet联合控制(HED + Depth + Canny)。

  • 使用 Depth Anything V2 模型生成深度图。

  • 集成 WD14标签器 自动生成提示词。

  • 采用 Flux采样器FP8低精度模型 优化生成效率。

输出结果

  • 高分辨率图像(默认1024x1024),风格受输入提示词和ControlNet条件约束。


2. 核心模型

模型名称

功能说明

Stable Diffusion XL

基础图像生成模型(Flux.1-Dev fp16版本)。

Depth Anything V2

从输入图像生成深度图。

ControlNet V3

提供HED、Depth、Canny三种控制条件。

WD14 Tagger

自动分析输入图像生成标签辅助提示词。


3. 关键组件与安装

组件名称

功能说明

安装方式

依赖项

DownloadAndLoadDepthAnythingV2Model

下载并加载Depth Anything V2模型。

需手动下载模型文件,放置于/models/depth_anything/

模型下载链接

ApplyFluxControlNet

应用Flux优化的ControlNet条件控制。

通过ComfyUI Manager安装Flux Nodes套件。

需配套的ControlNet V3模型(如XLabs-flux-hed-controlnet_v3)。

XlabsSampler

Flux开发的专用采样器,支持FP8低精度。

同属Flux Nodes套件。

需FP8兼容的显卡(如RTX 40系列)。

WD14Tagger|pysssss

自动图像标签生成器。

通过ComfyUI Manager安装WD14 Tagger节点。

需下载wd-v1-4-moat-tagger-v2模型。


4. 工作流结构

工作流分为 3个核心ControlNet组1个生成组

  1. HED软边缘组(蓝色)

    • 输入:原始图像(经ImageResize+调整)。

    • 预处理HEDPreprocessor提取软边缘。

    • 控制强度:0.8(通过ApplyFluxControlNet调节)。

  2. Depth深度组(橙色)

    • 输入:同一图像。

    • 预处理DepthAnything_V2生成深度图。

    • 控制强度:0.7。

  3. Canny线稿组(紫色)

    • 输入:同一图像。

    • 预处理CannyEdgePreprocessor提取线稿(阈值100/200)。

    • 控制强度:0.6。

  4. 生成组

    • 提示词:由CLIPTextEncode处理(如"Makoto Shinkai animation style")。

    • 采样XlabsSampler结合多ControlNet条件生成图像。


5. 输入与输出

输入参数

  • 图像:通过LoadImage节点加载(如示例中的小红书图片)。

  • 提示词:支持手动输入或由WD14Tagger自动生成。

  • 分辨率:默认1024x1024(通过EmptyLatentImage设置)。

输出结果

  • 最终图像保存在/ComfyUI/output/,包含生成参数元数据。


6. 注意事项

  1. 硬件要求

    • 推荐RTX 40系列显卡(FP8加速),显存≥12GB。

    • Depth Anything V2需额外显存,大分辨率图像可能崩溃。

  2. 模型安装

    • ControlNet V3模型需手动下载,放置于/models/controlnet/

    • 缺失模型时,ComfyUI会提示下载链接。

  3. 常见问题

    • 多ControlNet权重总和建议≤2.0(如HED 0.8 + Depth 0.7 + Canny 0.6)。

    • FP8模式可能产生噪点,可调整ModelSamplingFlux中的denoise参数。

常见问题