从瑕疵到完美:释放 SDXL 修复与风格融合的强大力量
通过结合 SDXL 修复与基于 IPAdapter 的风格融合,这一工作流将解锁AI驱动的图像编辑能力。轻松实现重绘、风格迁移与细节优化。学习如何安装、配置并掌握这款强大的工具,探索艺术与技术的完美融合。
- 模型
- Sdxl
- 显存
- 中等显存(12–16GB)
- 阅读时间
- 3 分钟
工作流概览
通过结合 SDXL 修复与基于 IPAdapter 的风格融合,这一工作流将解锁AI驱动的图像编辑能力。轻松实现重绘、风格迁移与细节优化。学习如何安装、配置并掌握这款强大的工具,探索艺术与技术的完美融合。
内容类型: Workflow
主要用途: Download
所需模型
- Sdxl
所需节点
- Ipadapter
- Inpaint
配置说明
- 打开工作流模板前,请先安装所需模型。
- 推荐硬件:中等显存(12–16GB)。
1. 工作流概述

此工作流实现基于SDXL模型的局部重绘(Inpainting)功能,并结合IPAdapter进行风格融合。核心功能包括:
对输入图像的指定区域(遮罩部分)进行内容重绘。
通过IPAdapter引用参考图像的风格特征,实现风格迁移。
使用Fooocus的专用修复模型优化重绘效果。
2. 核心模型
SDXL模型(
万享XL_超写实摄影V8.4):主模型,负责图像生成与重绘。IPAdapter模型(
ip-adapter-plus_sdxl_vit-h):将参考图像风格注入生成过程。Fooocus修复模型(
inpaint_v26.fooocus.patch):优化局部重绘的细节一致性。CLIP视觉模型(
CLIP-ViT-H-14-laion2B-s32B-b79K):解析参考图像的语义特征。
3. 组件说明
关键节点
LoadImage:加载输入图像和遮罩(需黑白遮罩图,白色为重绘区域)。PrepImageForClipVision:预处理参考图像,适配IPAdapter的输入要求。IPAdapterAdvanced:将参考图像风格与主模型融合,参数控制风格强度(默认1.0)。INPAINT_LoadFooocusInpaint:加载Fooocus的局部重绘专用组件。KSampler:采样器(Euler,30步),配置重绘的生成参数。
安装方法
IPAdapter插件:通过ComfyUI Manager安装
IPAdapter Plus。Fooocus修复模型:需手动下载模型文件(GitHub链接)并放入
ComfyUI/models/inpaint。
特殊依赖
IPAdapter模型:从HuggingFace下载
ip-adapter-plus_sdxl_vit-h.safetensors。CLIP视觉模型:自动下载(需网络连接)。
4. 工作流结构
输入组
输入:原始图像、遮罩、参考图像。
节点:
LoadImage、PrepImageForClipVision。
模型加载组
加载SDXL、IPAdapter、Fooocus模型。
节点:
CheckpointLoaderSimple、IPAdapterModelLoader、INPAINT_LoadFooocusInpaint。
重绘处理组
生成潜在空间数据并应用重绘。
节点:
VAEEncodeForInpaint、InpaintModelConditioning、INPAINT_ApplyFooocusInpaint。
风格融合组
通过IPAdapter融合参考图像风格。
节点:
IPAdapterAdvanced。
生成输出组
采样并解码为最终图像。
节点:
KSampler、VAEDecode、SaveImage。
5. 输入与输出
输入参数:
必选:原始图像、遮罩图、参考图像。
可选:提示词(如
a bronze round shield with complex patterns)、种子值(如506247113697241)。
输出结果:保存为
ComfyUI目录下的图像文件。
6. 注意事项
常见错误:
缺少IPAdapter模型文件会导致节点报错。
遮罩需为黑白PNG,且尺寸与输入图像一致。
性能优化:
降低
KSampler步数(如20步)可加速生成,但可能影响质量。使用高显存GPU(推荐≥12GB)。
兼容性:
需ComfyUI版本≥0.3.30,IPAdapter插件版本匹配。