掌握深度控制与风格迁移,尽在这款前沿流程

CN
ComfyUI.org
2025-03-25 11:16:10

解锁精准的风格迁移与深度控制,并通过AI驱动的图像生成技术提升人像、应用艺术风格并生成高质量图像。通过这个先进的流程,了解如何实现。

关键节点
Controlnet
显存
中等显存(12–16GB)
阅读时间
4 分钟
查看所需模型

工作流概览

解锁精准的风格迁移与深度控制,并通过AI驱动的图像生成技术提升人像、应用艺术风格并生成高质量图像。通过这个先进的流程,了解如何实现。

内容类型: Workflow

主要用途: Download

所需模型

  • Flux
  • Controlnet
  • Lora

所需节点

  • Controlnet

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:中等显存(12–16GB)。

1. 工作流概述

m8oehn8c07w2qdb5s08q01.jpg

本工作流专注于通过深度控制和AI技术实现精准风格迁移,主要功能包括:

  • 深度引导的图像生成

  • AI风格迁移

  • 自动提示词生成

  • 高质量输出渲染

典型应用场景:人像增强、艺术风格转换、可控图像生成

2. 核心模型

模型名称

功能

来源

F.1_Depth-fp16_1.0

深度感知生成基础模型

自定义

flux1-redux-dev

风格迁移模型

需额外安装

HyperL-F.1-加速器-PAseer_加速FLUX_AcceleratorV3.1 (LoRA)

生成加速器

需额外安装

depth_anything_v2_vitl.pth

深度图估计

ControlNet Aux

unsloth/Meta-Llama-3.1-8B-Instruct-bnb-4bit

提示词生成

Joy_caption_two

3. 关键组件

组件

功能

安装方式

DepthAnythingV2Preprocessor

深度图生成

ComfyUI-ControlNet-Aux

StyleModelLoader

加载风格迁移模型

内置

Joy_caption_two

AI提示词生成

自定义/GitHub

InstructPixToPixConditioning

图生图条件控制

内置

FluxGuidance

增强的引导缩放

内置

DF_Image_scale_to_side

智能图像缩放

Derfuu修改版节点

4. 工作流结构

  1. 输入部分

    • "照片——放这里":源图输入(658×1170)

    • "风格参考图——放这里":风格参考图(452×600)

  2. 提示词生成

    • 使用Llama-3分析图像并生成描述性提示词

  3. 深度控制

    • 创建深度图用于控制生成

    • 处理分辨率1216px

  4. 风格迁移

    • 应用风格模型配合CLIP视觉编码

    • 使用flux1-redux-dev风格模型

  5. 生成部分

    • 8步采样(Euler方法)

    • 1216px输出分辨率

5. 输入输出

输入

  • 源图(PNG/JPG)

  • 风格参考图(可选)

  • 提示词(可AI生成或手动输入)

输出

  • 带深度控制的风格化图像

  • 中间深度图

  • 生成的提示词

6. 技术说明

  • 需要较大显存(推荐12GB以上)

  • 部分模型使用fp8精度

  • 1216px深度处理可能内存需求较高

  • 风格模型使用multiply混合模式

7. 安装要求

  1. 需要安装的自定义节点:

    • ComfyUI-ControlNet-Aux(深度处理)

    • Derfuu修改版节点(智能缩放)

    • Joy_caption_two(提示词生成)

  2. 需要下载的模型:

    • depth_anything_v2_vitl.pth

    • flux1-redux-dev风格模型

    • HyperL-F.1 LoRA

这个工作流特别适合需要精确控制生成效果的设计师使用,通过深度图和风格参考的双重控制,能够实现高度可控的风格迁移效果。

常见问题