用AI生成令人惊艳的亚洲风格女性肖像

CN
ComfyUI.org
2025-04-22 14:09:38

用AI生成令人惊艳的东方风格肖像!学习如何结合图像分析、自动提示和多阶段采样,打造高质量效果。在本工作流程指南中探索Stable Diffusion、Florence-2与ControlNet的强大力量。

关键节点
Controlnet
显存
中等显存(12–16GB)
阅读时间
3 分钟
查看所需模型

工作流概览

用AI生成令人惊艳的东方风格肖像!学习如何结合图像分析、自动提示和多阶段采样,打造高质量效果。在本工作流程指南中探索Stable Diffusion、Florence-2与ControlNet的强大力量。

内容类型: Workflow

主要用途: Download

所需模型

  • Controlnet
  • Lora
  • Sd

所需节点

  • Controlnet

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:中等显存(12–16GB)。

1. 工作流概述

m9sl0jkws0c80ty2a8a69534f73fd06ca753e26dbc4aa3042bcbd1cf6068bea209a9a1168ab1746031a.png
  • 功能定位
    该工作流用于基于参考图生成具有东方美学风格的女性肖像,结合了图像分析、提示词反推、分阶段采样和后期处理,最终输出高质量人像。

  • 核心模型

    • Stable Diffusion (F.1基础模型_fp16):主模型,负责图像生成。

    • AWPortrait CN_2.0 LoRA:微调模型,增强东方女性肖像风格。

    • Florence-2-base:微软的多模态模型,用于分析参考图并生成详细描述(提示词反推)。

    • ControlNet (隐式集成):通过分块采样(TTP工具集)提升细节。

2. 组件说明

  • 关键节点

    • LoadImage:加载参考图(如output(1).png)。

    • Florence2Run:分析参考图内容,生成自然语言描述(用于自动提示词)。

    • CLIPTextEncodeFlux:将文本提示编码为条件向量。

    • KSamplerSelect & BasicScheduler:控制采样器和去噪调度策略(如deis采样器)。

    • TTP_Image_Tile_Batch:将图像分块处理,实现高频细节优化。

    • ImageColorMatch+:匹配参考图的色彩风格。

    • VAEDecodeTiled:分块解码潜在空间图像以减少显存占用。

  • 特殊依赖

    • 插件

      • comfyui-florence2(Florence-2模型支持)。

      • comfyui_ttp_toolset(分块处理工具)。

      • comfyui_essentials(包含ImageSmartSharpen+等后处理节点)。

    • 模型

      • 需手动下载Florence-2-base(通过HuggingFace)。

      • LoRA模型AWPortrait CN_2.0XLabs F.1 Realism LoRA_V1

3. 工作流结构

  • 分组逻辑

    1. 参考图分析组

      • 输入:参考图(LoadImage)。

      • 输出:Florence-2生成的描述文本(用于提示词)。

    2. 一阶段采样组

      • 输入:提示词、基础模型、LoRA。

      • 输出:初步生成的潜在图像。

    3. TTP放大组

      • 输入:分块图像、高低频分离采样参数。

      • 输出:高分辨率细节增强图像。

    4. 色彩调整组

      • 输入:生成图与参考图。

      • 输出:色彩匹配后的最终图像。

4. 输入与输出

  • 输入参数

    • 参考图(600x900像素)。

    • 提示词(可选手动补充)。

    • 分辨率(默认1024x1024,支持9:16竖版)。

    • 种子值(如459202764244119)。

  • 输出结果

    • 最终人像图像(预览节点PreviewImage)。

5. 注意事项

  • 显存需求:建议使用≥12GB显存的GPU,分块处理可降低压力。

  • 插件安装:需通过ComfyUI Manager安装Florence-2TTP Toolset

  • 错误排查

    • 若缺失节点,检查是否安装comfyui-layerstyle等插件。

    • 色彩不匹配时,调整ImageColorMatch+LAB参数。

常见问题