掌握 AI 人像编辑:一步步打造惊艳效果的工作流程
使用 AI 人像工作流程,解锁高品质人像生成和编辑:集成 AI 生成、人脸识别、修复和风格控制。探索打造惊艳人像的终极工作流程。
- 使用场景
- Portrait
- 适用场景
- Portrait
- 显存
- 高显存(24GB+)
- 阅读时间
- 4 分钟
工作流概览
使用 AI 人像工作流程,解锁高品质人像生成和编辑:集成 AI 生成、人脸识别、修复和风格控制。探索打造惊艳人像的终极工作流程。
内容类型: Workflow
主要用途: Download
所需模型
- Sdxl
- Controlnet
- Sd
所需节点
- Ipadapter
- Controlnet
配置说明
- 打开工作流模板前,请先安装所需模型。
- 推荐硬件:高显存(24GB+)。
1. 工作流概述

该工作流名为 “AI写真工作流”,主要用于 高质量人像写真生成与编辑,结合了 AI 生成、面部识别、图像修复、风格控制 等功能,适合专业摄影后期或艺术创作。
核心模型:
Stable Diffusion XL (SDXL):
LEOSAM HelloWorld _ SDXL_v7.0(基础生成模型)。ControlNet:
xinsir_union_promax.safetensors(控制姿态和结构)。IPAdapter:用于图像风格迁移和细节增强。
Florence-2:面部识别和分割。
功能:
人脸检测与自动抠图。
多 ControlNet 控制(姿态、深度、边缘)。
背景替换与风格融合。
低幅度重绘修复细节。
2. 组件说明
节点名称 (Node) | 功能说明 | 安装方式 |
|---|---|---|
CheckpointLoaderSimple | 加载 SDXL 基础模型。 | 需手动下载模型至 |
ControlNetLoader | 加载 ControlNet 模型(姿态/深度控制)。 | 需下载 |
Florence2ModelLoader | 加载 Florence-2 模型(面部识别和分割)。 | 需安装 |
IPAdapterUnifiedLoader | 加载 IPAdapter 模型(风格迁移)。 | 需安装 |
Sam2Segmentation | 基于 SAM2 的精细抠图。 | 需安装 |
AIO_Preprocessor | 图像预处理(如边缘检测、深度图生成)。 | 需安装 |
DifferentialDiffusion | 差异化扩散(优化生成细节)。 | 内置节点。 |
Image Comparer (rgthree) | 对比原始图与生成图。 | 需安装 |
3. 工作流结构
工作流分为 多个功能组:
面部识别与抠图:
使用
Florence2Run检测人脸,Sam2Segmentation精细抠图。输出:人脸遮罩和定位数据。
ControlNet 控制:
通过
ControlNetApplySD3控制姿态和背景结构。支持多 ControlNet 叠加(深度 + 边缘)。
IPAdapter 风格迁移:
使用参考图(如“赛博朋克女孩”)迁移风格到生成图像。
图生图修复:
低幅度重绘修复五官细节,结合 PS 蒙版调整。
4. 输入与输出
输入参数:
原始图像(如人像照片)。
提示词(可选,默认使用 Florence-2 生成的描述)。
控制参数(如 ControlNet 权重、重绘幅度)。
输出结果:
最终写真图像(带风格化背景和优化细节)。
中间结果对比(通过
Image Comparer)。
5. 注意事项
模型依赖:
需下载多个大模型(如 SDXL、ControlNet、Florence-2),总大小可能超过 20GB。
模型下载地址:
SDXL: LEOSAM HelloWorld
ControlNet: xinsir_union_promax
硬件要求:
显存 ≥12GB(如 RTX 3080),推荐 24GB 显存以流畅运行全流程。
常见问题:
抠图不精确:调整
Sam2Segmentation的bboxes参数或手动标注坐标。风格迁移过强:降低
IPAdapterAdvanced中的weight(默认 0.7)。