解锁高保真角色迁移:InfiniteYou 工作流助你实现精准角色再现!

CN
ComfyUI.org
2025-06-12 07:21:57

解锁 AI 驱动的角色迁移功能,尽在 InfiniteYou!通过字节跳动前沿模型与 ComfyUI 工作流的结合,InfiniteYou 实现了高精度的身份迁移与图像生成控制。无论是人脸特征的精准保留,还是风格与姿态的灵活操控,该流程都能助你轻松完成角色再现与定制输出。

关键节点
Controlnet
显存
中等显存(12–16GB)
阅读时间
3 分钟
查看所需模型

工作流概览

解锁 AI 驱动的角色迁移功能,尽在 InfiniteYou!通过字节跳动前沿模型与 ComfyUI 工作流的结合,InfiniteYou 实现了高精度的身份迁移与图像生成控制。无论是人脸特征的精准保留,还是风格与姿态的灵活操控,该流程都能助你轻松完成角色再现与定制输出。

内容类型: Workflow

主要用途: Download

所需模型

  • Flux
  • Controlnet

所需节点

  • Controlnet

配置说明

  • 打开工作流模板前,请先安装所需模型。
  • 推荐硬件:中等显存(12–16GB)。

1. 工作流概述

mbt1woy65dzo9rghdz39a37e7f128fa0774d874f68ad49823a78c6e2bc2b5aac40c0fa4c59a968b5841.png

这是基于字节跳动InfiniteYou模型的角色迁移工作流,专为高保真角色形象转换设计,核心功能包括:

  • 角色特征迁移:将参考图像的人物特征(如面部、服饰)迁移到新场景

  • 多阶段控制:结合ControlNet和自定义UNet实现精细化生成

  • Flux技术栈:采用字节跳动优化的flux1-dev-fp8模型和flux_t5xxl文本编码器

2. 核心模型

模型名称

功能

来源

flux1-dev-fp8.safetensors

基础UNet模型(FP8精度)

字节跳动内部

flux_t5xxl_fp8_e4m3fn.safetensors

多模态文本编码器

需从HuggingFace下载

sim_stage1_control_net.safetensors

角色结构控制

需配套下载sim_stage1_img_proj.bin

flux_anti_blur_lora.safetensors

抗模糊LoRA

工作流内置

3. 关键组件

组件名称

功能

安装方式

InfiniteYouApply

角色迁移核心节点

安装ComfyUI_InfiniteYou

TeaCache

模型推理缓存加速

通过ComfyUI Manager搜索TeaCache

FluxGuidance

动态条件引导

需安装comfy-core最新版

BasicScheduler

定制采样调度

内置组件

4. 工作流结构

阶段1: 模型加载

  • 节点组UNETLoader + DualCLIPLoader + ControlNetLoader

  • 关键参数

    • flux1-dev-fp8模型(低精度高性能)

    • 双CLIP编码器(flux_t5xxl+flux_clip_l

阶段2: 角色迁移

  • 核心节点InfiniteYouApply

  • 输入

    • 参考图像(LoadImage加载)

    • ControlNet结构控制(权重1.0)

    • 正面提示词(描述目标场景)

阶段3: 动态采样

  • 技术栈

    • FluxGuidance(CFG=2.5)

    • BasicScheduler(30步simple调度)

    • SamplerCustomAdvanced(Euler采样器)

5. 输入与输出

  • 输入参数

    • 必选:参考角色图像(支持PNG/JPG)

    • 可选:自定义提示词(如示例中的"警服肌肉男"描述)

    • 隐藏参数TeaCache的缓存强度(默认0.4)

  • 输出结果

    • 分辨率1152x864的迁移后图像

    • 通过ailab_ImagePreview节点实时预览

6. 注意事项

  1. 模型依赖

    • 必须下载sim_stage1_img_proj.bin并放入models/InfiniteYou文件夹

    • Flux系列模型需申请字节跳动内部权限

  2. 硬件要求

    • 最低显存:12GB(FP8模式)

    • 推荐配置:RTX 3090及以上

  3. 常见问题

    • 出现Tensor dtype mismatch错误 → 检查所有模型是否为FP8版本

    • 角色特征丢失 → 调整InfiniteYouApply中的ref_image权重(建议0.8-1.2)

常见问题