图像重建新境界:借助 FLUX 和逆向采样的力量

CN
ComfyUI.org
2025-06-09 09:49:31

解锁高精度图像重建:结合 FLUX 架构与逆向采样 | 探索如何借助最前沿的 AI 技术,实现前所未有的细节编辑控制

模型
Flux
Lora
显存
低显存(≤8GB)
阅读时间
4 分钟
查看所需模型

工作流概览

解锁高精度图像重建:结合 FLUX 架构与逆向采样 | 探索如何借助最前沿的 AI 技术,实现前所未有的细节编辑控制

内容类型: Workflow

主要用途: Download

所需模型

  • Flux
  • Lora

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:低显存(≤8GB)。

1. 工作流概述

mbowvmh9pt22bush4u9图片压缩effaea3406cc632335cbdf1bf537c3623573b29fdb321f59ad6776595ab2392b.jpg

该工作流基于 FLUX架构逆采样技术,专为高精度图像重塑设计,核心功能包括:

  • 逆采样(Inverse Sampling):通过数学优化重构图像潜空间,保留原图结构的同时修改细节。

  • FLUX模型控制:动态调整生成过程的噪声调度和条件引导,实现更可控的输出。

  • 风格迁移与LoRA微调:支持加载自定义LoRA(如拟人化猫模型)和CLIP文本引导。

  • 多阶段处理:包含初始采样→逆采样→重新生成三步流程,适合复杂编辑需求。

2. 核心模型

模型/组件

功能

来源

ZOZ_漫梦琉璃_浮世绘梦

基础UNET模型,擅长艺术风格生成

需手动下载至models/unet

CJ_CatMan丨拟人猫穿衣猫_v2.0

LoRA微调模型,添加拟人化猫特征

放置到models/loras

ae.sft

专用VAE模型,优化潜空间解码

需下载至models/vae

T5-XXL + CLIP-L

双文本编码器,增强提示词理解

通过DualCLIPLoader加载

3. 关键组件

组件名称

功能

安装方式

FluxReverseODESampler

逆采样核心算法,重构潜空间

需安装 FLUX Suite 插件

InFluxModelSamplingPred

FLUX噪声调度控制器

同上

ImageResize+

智能图像缩放,保持比例

通过ComfyUI Manager安装

LibLibTranslate

中英文提示词自动翻译

安装 LibLibAI插件

4. 工作流结构

  1. 初始采样阶段

    • 输入:原始图像(如38834962-xxxx.png)→ ImageResize+ 调整至1024x1024

    • VAEEncode 将图像编码为潜空间。

    • BasicScheduler 设置初始噪声调度(28步,simple模式)。

  2. 逆采样阶段

    • FluxReverseODESampler 逆向解构潜空间(参数eta=0.84,值越大越保留原图)。

    • FluxDeGuidance 调整条件引导强度(默认3.5,影响风格迁移程度)。

  3. 重新生成阶段

    • FluxForwardODESampler 正向生成新图像。

    • LoRA加载器 注入拟人化猫特征(权重1.0)。

    • 最终通过VAEDecode解码并保存图像。

5. 输入与输出

  • 输入参数

    • 图像:需上传一张图片(如动物照片),自动缩放至1024x1024

    • 提示词:通过LibLibTranslate输入(如“老虎”→自动翻译为“tiger”)。

    • 逆采样参数eta(0~1,控制与原图相似度)、steps(默认28步)。

  • 输出结果:生成一张1024x1024的修改后图像(PNG格式)。

6. 注意事项

  • 硬件要求:建议16GB以上显存(逆采样阶段显存占用极高)。

  • 参数调优

    • eta值:趋近1时保留更多原图细节,趋近0时更自由创作。

    • FluxDeGuidance强度:>3时风格迁移明显,<2时更依赖提示词。

  • 常见问题

    • 显存不足:降低steps或使用fp16精度模式。

    • 逆采样失败:检查输入图像分辨率是否为2的倍数(如512x512)。

常见问题