前言

ComfyUI 系列(11):SD 3.5 工作流


引言

Stable Diffusion 3.5(SD 3.5)是当前最先进的文本到图像生成模型之一,具备更强的文本理解能力、更高的图像细节以及更好的一致性。

相比于 SDXL 和 SD 1.5,SD 3.5 在复杂场景生成、文字嵌入、角色一致性等方面都有显著提升。

SD 3.5 模型是最近新出的,以后所有工作流都以3.5模型为基础

本篇文章将手把手教你如何在 ComfyUI 中搭建 Stable Diffusion 3.5 的完整工作流,助你快速上手并生成高质量图像。


所有的AI设计工具,安装包、模型和插件,都已经整理好了,👇获取~

请添加图片描述

官方工作流

图像可以直接导入工作流中

这个是stabilityai在huggingface上提供的工作流示例

这里主要讲解一下SD 3.5工作流与SD 1.5工作流相比,增加了哪些东西

SD 3.5的模型放尾部的网盘上

文本编码器

文本编码器就是CLIP模型

在SD 3.5中不管是Large、Large Tubro 还是Medium,都不包含文本编码器

需要额外使用TripleCLIPLoader加载 clip_g、clip_l、t5xxl_fp16 三个文本编码器

"Add Node"->"advanced"->"loaders"->"TripleCLIPLoader"

输出尺寸

SD 3.5 的输出标准尺寸是 1024*1024

小于这个尺寸,只会描绘一张大图的一部分,比如128*128,可能只会输出一个脸部

大于这个尺寸,整幅图像可能会完全崩溃掉

实际测试过程,1536×1536以下的图像都基本能看,大于这个尺寸就会出现噪点,甚至图像崩溃的情况

基本上还是默认使用1024×1024输出效果最好

ModelSamplingSD3

"Add Node"->"advanced"->"model"->"ModelSamplingSD3"

这个node是用来调整采样的偏移值

调整范围0~100,默认3.0

可以用于提升图像的质量,生成高分辨率图像时,适当增大 shift 值有助于更好地处理噪声缩放问题

0~100 生成10张图像,值越大绘制细节越少,图像越模糊

低值(1-5):更多细节,适合写实风格

中值(6-15):平衡细节与风格

高值(16-100):柔和、模糊风格

ConditioningZeroOut

"Add Node"->"advanced"->"conditioning"->"ConditioningZeroOut"

这个节点用于将条件数据结构中的特定元素置零

如果使用了这个,那么CLIP Text Ecode(Prompt)中的文本就没用了,因为会全部设置为0

要注意这个与CLIP Text Ecode(Prompt)留空是有区别的

CLIP Text Ecode(Prompt)留空,依然是有数据的

ConditioningSetTimestepRange

"Add Node"->"advanced"->"conditioning"->"ConditioningSetTimestepRange"

于精确控制条件在生成过程中的影响范围。

起始时间步(Start):定义条件影响的开始时间步

结束时间步(End):定义条件影响的结束时间步

希望条件仅在特定阶段生效的时候可以使用这个实现更精细的控制

原始输出

ConditioningSetTimestepRange 输出

会在原始输出后面添加两个字段

Conditioning(Combine)

"Add Node"->"conditioning"->"Conditioning(Combine)"

将两个条件合并为一个,如不同的文本提示、风格或控制信号等等融合在一起

实际上这里并没有进行运算,只是将两个输出拼接成数组而已

conditioning_1

conditioning_2

输出

采样器与调度器

这里使用了 efficiency-nodes-comfyui 效率节点

https://github.com/jags111/efficiency-nodes-comfyui.git

使用这个节点的XY图表,可以速生成各个采样器与各个调度器配合下生成的图表,

29个采样器,9个调度器,一共生成261幅图像

图像120M太大了,这里只能截个图,图片放网盘上

为了帮助大家更好地掌握 ComfyUI,我在去年花了几个月的时间,撰写并录制了一套ComfyUI的基础教程,共六篇。这套教程详细介绍了选择ComfyUI的理由、其优缺点、下载安装方法、模型与插件的安装、工作流节点和底层逻辑详解、遮罩修改重绘/Inpenting模块以及SDXL工作流手把手搭建。

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

请添加图片描述

一、ComfyUI配置指南
  • 报错指南
  • 环境配置
  • 脚本更新
  • 后记

img

二、ComfyUI基础入门
  • 软件安装篇
  • 插件安装篇

img

三、 ComfyUI工作流节点/底层逻辑详解
  • ComfyUI 基础概念理解
  • Stable diffusion 工作原理
  • 工作流底层逻辑
  • 必备插件补全

img

四、ComfyUI节点技巧进阶/多模型串联
  • 节点进阶详解
  • 提词技巧精通
  • 多模型节点串联

img

五、ComfyUI遮罩修改重绘/Inpenting模块详解

img

六、ComfyUI超实用SDXL工作流手把手搭建
  • Refined模型
  • SDXL风格化提示词
  • SDXL工作流搭建

img

由于篇幅原因,本文精选几个章节,详细版点击下方卡片免费领取

img
请添加图片描述

声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。