大家好,我是画画的小强
今天我将继续分享AI绘画Stable Diffusion的模型、参数含义等,分享给各位朋友一起学习。
一、模型
Stable difusion 模型就是所谓的大模型,用来控制整个画面的风格走势的。
打开webui页面,可以看到大模型一般2G以上,大部分后缀为.safetensors或.ckpt,如图:
大模型一般保存文件夹路径如下:
大小为2-7G不等(也就是说如果要增加模型,直接拖到这儿就Ok,各种模型下载请看文末扫描获取哦)
在这里简单介绍下目前主要两类的模型SDXL和SD1.5区别:
SDXL全称 stable diffusion XL;
SD 全称 stable diffuson,一般将 SD 和 SD 1.5 等同
区别:(一句话总结就是SDXL好,但配置要求高哈哈)
1、本身出图大小
SD1.5模型参数量小,出图就只能512、768起步,本来像素就不够高。
SDXL是1024起步,长图一般是768*1024这种尺寸,比1.5模型大了一圈,如果再加上高清放大,从清晰度来说肯定是更好的。
2、出图质量
好的人像SDXL模型更高清些,脸部细节更真实,不过显存不足的小伙伴也没啥必要非得整XL。
SD1.5,找到人像效果好的真实模型,也是 ok 的。
3、提示词理解能力
SDXL的一个特点就是,对文本的理解能力更强。
4、人像lora训练方面
以往在 1.5 模型上训练的 lora 更容易过拟合,后面使用SDXL,选我推荐的模型,成功率会高些。
但 SDXL 的 lora,训练更久,尺寸更大,时间消耗也是比较多的。
5、Controlnet 控制方面
如果需要一些Controlnet控制,还是优先1.5型
SDXL的控制类型还不多,暂时不够完善。
二、VAE
相当于给画面加载滤镜的作用,修正图片色彩,不加载vae画面会比较灰,或者出现很奇怪的乱码感觉。
对应SD1.5模型,常用VAE是:
对应SDXL模型,常用VAE是:
三、lora
一些风格类的小模型,比如人脸、画风、物品等,都可以训练成一个lora模型,通常在几十M到几百M,模型网站上标记着LORA的均为lora模型。
路径如下:
调用方式:找到Lora下面的标签,点击想要的模型,可以同时混合多选。
就会在上方提正向示词当中出现:
冒号后面是权重,一般在0.7、0.8就可以,根据情况去调整。
但是需要注意,lora使用的时候一般是需要触发词的,这个需要在原模型网站上去看,或使用C站助手这款插件去自动获取 (C站助手插件下载请看文末扫描获取哦)
如果获取到,点开lora右上角的小图片应该能看:
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。