来来来!一次了解ai绘画stablediffusion 所有的模型分类,学习不迷糊。
StableDiffusion模型种类
Checkpoint:SD模型
作用:从Stablediffusion基础模型训练出来的,相当于安卓系统的二次开发,主要确定输出方向的大模型(可以片面理解为各种风格类型)
大小:比较大,差不多都在2G以上
存放位置:\models\Stable-diffusion
获取方式:
1、启动器下载:不需要魔法上网,缺点是没有效果图,属于盲猜,模型种类也少
2、Civitai网站下载:需要魔法上网,模型多,分类清晰
目前比较流行的模型,包括
Anything、waifu、novelai、Counterfeit二次元漫画模型
Chilloutmix三次元真实人物模型
VAE:变分自编码器
作用:从后期来理解,有点类似滤镜,美颜打开之后你懂得!这一部分后期从业者的话,专业的修图软件处理比较好,可控性比较大
存放位置:\models\VAE
获取方式:启动器下载,这类模型目前比较少,Civitai网站没有创建分类
Textual Inversion:嵌入式T.I.Embedding
作用:就是经常听到的Embedding,是定义新关键字以生成新人物或图片风格的小文件。它们很小,通常为10-100 KB。必须将它们与checkpoint模型一起使用。可以理解成 提示词预设
存放位置:\Embedding
获取方式:Civitai网站在筛选中选择Textual Inversion
Hypernetworks:超网络
作用:是添加到checkpoint模型中的附加网络模块。可以转换checkpoint模型的风格。它们通常为5-300 MB。必须与checkpoint模型一起使用。
存放位置:\models\hypernetworks
获取方式:Civitai网站在筛选中选择hypernetworks
LoRa模型
作用:用于修改图片风格的checkpoint模型的小补丁文件。通过复刻人物、物品、动作、细节和风格来微调细节。它们通常为10-200 MB。必须与checkpo-int模型一起使用。是比较常用的一种模型
存放位置:\models\Lora
获取方式:Civitai网站在筛选中选择Lora
Controlnet:约束控制模型
作用:人物动作姿势模型,可以控制角色的姿势、线稿上色、提取线稿、用色块生成图片以及提取图片深度图等功能
存放位置:\extensions\sd-webui-controlnet\models
获取方式:Civitai网站在筛选中选择controlnet
Aesthetic Gradient
是一个功能,它将准备好的图像数据的方向添加到“Embedding”中将输
入的提示词转换为矢量表示并定向图像生成。
LyCORIS
可以让LORA学习更多的层,可以当做是升级的LoRA