今天演示的工作流以SDXL Pose Extraction for Character Generation Portrait为主题,它的目标是将输入的人物参考图像,通过 InstantID、ControlNet 与多种 LoRA 组件相结合,实现人物手办风格的再生成。
效果展示环节不仅能让人直观感受到原始照片与生成结果之间的对应关系,还能体验到风格迁移与精细化修复带来的变化。整个流程覆盖了模型加载、提示词解析、人物特征提取、姿态控制以及后期超分修复等环节,最终输出高分辨率且风格统一的人物形象。
文章目录
- 工作流介绍
- 核心模型
- Node节点
- 工作流程
- 大模型应用
- Qwen2VLNode 图像内容反推描述核心
- 提示词追加(Prefix Text)+ Text Concatenate 手办提示词增强与合成
- CLIPTextEncode(正向) 手办风格主语义编码
- CLIPTextEncode(负向) 画质瑕疵抑制器
- ApplyInstantID 身份特征 + 语义融合核心
- 使用方法
- 应用场景
- 开发与应用
工作流介绍
该工作流依托于SDXL 大模型与配套的 LoRA/ControlNet 组件完成风格控制与细节提取。工作流的结构通过多节点组合实现不同层面的功能,例如基础模型负责图像生成框架,LoRA 模型实现风格特定化,InstantID 保障人物面部特征还原,ControlNet 则对姿态与关键点进行精确引导。整个工作流不仅适用于手办或卡通风格角色生成,也能够通过替换模型与参数应用到写实或其他艺术风格场景。
核心模型
核心模型部分以SDXL 系列大模型为主,结合专用 LoRA 与 VAE,形成图像生成的基础框架。大模型提供整体生成质量与结构,LoRA 模型扩展了特定风格表达,而 VAE 负责潜空间的编码解码以保证输出图像的细节与色彩还原度。
| 模型名称 | 说明 |
|---|---|
| 【SDXL】新世界_LEOSAM HelloWorld | 工作流的主要基础模型,提供图像生成框架 |
| 【SDXL】全新卡通盲盒_盲盒设计_v1.safetensors | LoRA 模型,用于手办卡通风格迁移 |