stable diffusion实践操作-大模型介绍

本文专门开一节写大模型相关的内容,在看之前,可以同步关注:
stable diffusion实践操作

模型下载网站
国内的是:https://www.liblibai.com
国外的是:https://civitai.com(科学上网)

一、发展历史

1 官方大模型

大模型从无到有训练大模型花费时间非常久,花费非常高,上百万美元:

2 CHECKPOINT

在官方大模型的基础上再次训练,就是我们看到的CHECKPOINT模型,但是对于硬件的要求还是很高,使用起来不是很灵活

3 EMBEDDING

后来发展出来了embedding模型,文件小,训练成本低,但是效果差强人意,好处是灵活

4 Lora 和Hypernetworks

二 什么是大模型

我们可以理解为各种绘画风格的打包集合,不像midjourney那样,想要什么风格,就在关键词中写上就可以了,比如,国风水墨,迪士尼等。如下:

Stable Diffusion就需要大模型来规定风格,比如国风模型,迪士尼模型等,具体参考checkpoint,选定这个模型后,那么你所有的关键词都是根据这个模型来确定的,也就是说,不同模型,关键词不一样,这也是SD比较难学的原因。

三 使用注意事项

通过二我们知道,每个大模型的关键词都不一样,所以下载大模型的时候要详细看作者说明,以及作者的关键词,通过关键词来学习,这样才能使用好这个大模型。

正文


序号模型名称简介
1Stable Diffusion 常用官方模型V1.5版本官方
2Stable Diffusion XL1.0官方
3Anything 系列二次元
4Realistic Vision V2.0写实模型
5DreamShaper人物肖像
6MeinaMix动漫
7ChilloutMix现实
8majicMix系列
9AbyssOrangeMix2_hard.safetensors漫画

1、官方大模型

底模/大模型 是SD能够绘图的基础模型。安装完SD软件后,必须搭配基础模型才能使用。不同的基础模型,其画风和擅长的领域会有侧重。常见的模式,后缀ckpt,safetensors,大小在2-8G之间。
【1】Stable Diffusion 常用官方模型V1.5版本,v1-5-pruned.ckpt。
下载链接:https://openai.wiki/stable-diffusion-model-v1-5.html
【2】目前升级到新版本【Stable Diffusion XL1.0 正式版】
下载链接:https://www.liblibai.com/modelinfo/77a9ca05a2c7c93ceb05f4dceae9ed97
【3】Anything系列型号,偏向二次元
anything-v5-PrtRE.safetensors模型可以用于生成多种类型的图像,包括肖像、风景、动物、卡通、科幻等。它具有较强的适应性和泛用性,效果表现出较强的真实感和细节还原能力。
在这里插入图片描述

详细介绍链接:https://zhuanlan.zhihu.com/p/640797704

2、写实大模型Realistic Vision V2.0,

链接: https://pan.baidu.com/s/1wat_55oIRa-fSSleqpE1kw 提取码: 5u8w
在这里插入图片描述

3、DreamShaper

这个模型在肖像提示上表现得特别好,创造了一件令人惊叹的艺术品,捕捉到了主题的感觉和风格元素。在风景方面,DreamShaper能够创造出一个有趣而复杂的图像,具有鲜艳的色彩和迷人的细节。插图展示了充满活力的色彩和各种形状,使图像栩栩如生。
链接: https://pan.baidu.com/s/1zZeTk3J4odbWqjwJle_1Bg 提取码: ba47
这个模型推荐给任何想用自己的人工智能模型创作插图的人。此外,您可以使用各种设置来确保结果看起来更像数字艺术作品。我们建议尝试不同的步数,并使用此模型提示工程技术以获得最佳结果。

4、MeinaMix

MeinaMix是最受欢迎的型号之一,这是有充分理由的。这个模型能够生成具有独特绘画般质量的精彩插图。与Anything模型非常相似,MeinaMix在人物方面专注于动漫风格,但它也能够生成复杂的插图。
链接: https://pan.baidu.com/s/1ECn3AAU6CBj_6rOriFn7ig 提取码: u24m
在这里插入图片描述

5、checkpoint模型下载,在C站,或者liblib上面,标签是checkpoint的就是。

在这里插入图片描述

6、ChilloutMix-KoreanDollLikeness

提到SD模型,Chillout是必不可少的。即使因为停止了后续更新,市场上已经涌现出了很多能够替代Chillout的模型,但Chillout依旧是一座丰碑:第一个爆火的真人模型。
Chillout在真人出图是统治级别的占有率 。是非常好的模型,但或许因为成熟的太早,也很快就停更了。最新版本是2023年2月的版本。

模型分为32和16两个精度,其中16精度可以大幅节省显存,但是因为玄学原因,我还是在用32精度的。
介绍以及下载链接:https://zhuanlan.zhihu.com/p/632997666
在这里插入图片描述

7 、majicMix系列

majic也是堪称封神的模型。作者是国人大佬麦橘。

明暗光影控制都非常到位,这种能够控制暗影部分效果的能力,是之前SD相比于MJ所相对较弱的部分,但是有了majic,就给补上了。尤其是女性的眼睛和神态,像戴了美瞳一样。甚至人物身上的小雀斑小痣都能够出现。尤其惊为天人的,是对男性的表现力。从肌肉到血管,都非常的真实。

有一个趣闻,就是AI博主娜乌斯嘉,娜娜酱,炼了自己的lora融进sombra后,作者直接在最新的V5版本里把娜娜酱融进了正式版,属于是真正的赛博永生了。

模型推荐用Euler作为采样器。

以及作者强调了N次的……不要开面部修复!
majic系列分了好几个,分别是:
在这里插入图片描述
在这里插入图片描述

7.1 majicMIX realistic:主打真实系,是通用版本。

下载介绍链接:https://www.liblibai.com/modelinfo/bced6d7ec1460ac7b923fc5bc95c4540

在这里插入图片描述

7.2 majicMIX fantasy:风格非常炸裂美好,但是远距离脸部需要inpaint以达成最好效果。

下载链接:https://www.liblibai.com/modelinfo/ab2e95bb3f3e746456d8955216865963
在这里插入图片描述

7.3 majicMIX lux:融合了,realistic和fantasy,是适合抽卡博梦想的模型。

7.4majicMIX horror:偏恐怖主题。

8. AbyssOrangeMix2_hard.safetensors

下载链接:https://www.liblibai.com/modelinfo/2bd0c7cec6e843f69ee446c9820adbf8
参考示例:
在这里插入图片描述
下面是一个生成的龙,是不是看着比以前的好多了

结尾


常用到的基础模型和插件(持续更新中)
链接:https://pan.baidu.com/s/1c9utQmWlGcRqLTr_kftTyA?pwd=1111
提取码:1111

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/68564.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

自动化驱动程序管理

在部署操作系统时,每次都从下载和分发所需的驱动程序中实现真正的独立性可能是一场艰苦的战斗。特别是具有硬件多样化的环境,并且需要支持新的硬件类型时。借助 OS Deployer,可以对所有端点使用一个映像,无论品牌和型号如何&#…

【用unity实现100个游戏之7】从零开始制作一个仿杀戮尖塔卡牌回合制游戏

文章目录 前言素材资源开始一、UI框架二、挂载脚本三、事件监听,用于绑定按钮事件四、声音管理器五、excel转txt文本六、游戏配置七、用户信息表八、战斗管理器九、 敌人管理器十、玩家血量、能量、防御值、卡牌数十一、敌人血量 行动显示逻辑十二、UI提示效果实现十…

Jetsonnano B01 笔记1:基础理解—网络配置—远程连接

今日开始学习 Jetsonnano B01,这是一台小电脑,可以用来: 运行现代 AI 负载,并行运行多个神经网络,以及同时处理来自多个高清传感器的数据,可广泛应用与图像分类、对象检测、图像分割、语音处 理等领域。它…

【python爬虫】15.Scrapy框架实战(热门职位爬取)

文章目录 前言明确目标分析过程企业排行榜的公司信息公司详情页面的招聘信息 代码实现创建项目定义item 创建和编写爬虫文件存储文件修改设置 代码实操总结 前言 上一关,我们学习了Scrapy框架,知道了Scrapy爬虫公司的结构和工作原理。 在Scrapy爬虫公司…

配置本地maven

安装maven安装包 修改环境变量 vim ~/.bash_profile export JMETER_HOME/Users/yyyyjinying/apache-jmeter-5.4.1 export GOROOT/usr/local/go export GOPATH/Users/yyyyjinying/demo-file/git/backend/go export GROOVY_HOME/Users/yyyyjinying/sortware/groovy-4.0.14 exp…

手写Mybatis:第10章-使用策略模式,调用参数处理器

文章目录 一、目标:参数处理器二、设计:参数处理器三、实现:参数处理器3.1 工程结构3.2 参数处理器关系图3.3 入参数校准3.4 参数策略处理器3.4.1 JDBC枚举类型修改3.4.2 类型处理器接口3.4.3 模板模式:类型处理器抽象基类3.4.4 类…

linux 进程隔离Namespace 学习

一、linux namespace 介绍 1.1、概念 Linux Namespace是Linux内核提供的一种机制,它用于隔离不同进程的资源视图,使得每个进程都拥有独立的资源空间,从而实现进程之间的隔离和资源管理。 Linux Namespace的设计目标是为了解决多个进程之间…

微服务设计和高并发实践

文章目录 1、微服务的设计原则1.1、服务拆分方法1.2、微服务的设计原则1.3、微服务架构 2、高并发系统的一些优化经验2.1、提高性能2.1.1、数据库优化2.1.2、使用缓存2.1.3、服务调用优化2.1.4、动静分离2.1.5、数据库读写分离 2.2、服务高可用2.2.1、限流和服务降级2.2.2、隔离…

C语言插入排序

前言: 本文主要讲解插入排序中的直接插入排序和希尔排序。 1、直接插入排序: 1.1基本思想 直接插入排序是一种简单的插入排序法,其基本思想是把待排序的数值按照大小顺序逐个插入到一个已经排好序的有序序列中,直到将所有记录…

Spring Cloud--从零开始搭建微服务基础环境【四】

😀前言 本篇博文是关于Spring Cloud–从零开始搭建微服务基础环境【四】,希望你能够喜欢 🏠个人主页:晨犀主页 🧑个人简介:大家好,我是晨犀,希望我的文章可以帮助到大家,…

QT day5

服务器: #include "widget.h" #include "ui_widget.h"Widget::Widget(QWidget *parent): QWidget(parent), ui(new Ui::Widget) {ui->setupUi(this);//给服务器指针实例化对象server new QTcpServer(this); }Widget::~Widget() {delete ui…

Java“牵手”京东商品评论数据接口方法,京东商品评论接口,京东商品评价接口,行业数据监测,京东API实现批量商品评论内容数据抓取示例

京东平台商品评论数据接口是开放平台提供的一种API接口,通过调用API接口,开发者可以获取京东商品的标题、价格、库存、月销量、总销量、库存、详情描述、图片、评论内容、评论日期、评论图片、追评内容等详细信息 。 获取商品评论接口API是一种用于获取…

el-select 加多选框使用

解决方法&#xff1a; el-select 添加属性 multiple&#xff0c; <el-form-item label"订单来源&#xff1a;"><el-selectv-model"tableFrom.userType"clearablemultipleplaceholder"请选择"class"selWidth"><el-opt…

LeetCode-53-最大子数组和-贪心算法

贪心算法理论基础&#xff1a; 局部最优推全局最优 贪心无套路~ 没有什么规律~ 重点&#xff1a;每个阶段的局部最优是什么&#xff1f; 题目描述&#xff1a; 给你一个整数数组 nums &#xff0c;请你找出一个具有最大和的连续子数组&#xff08;子数组最少包含一个元素&#…

开发工具——IDE安装 / IDEA子module依赖导入失败编译提示xx找不到符号 / IDEA在Git提交时卡顿

近期换了工作电脑&#xff0c;公司的IT团队不够给力&#xff0c;不能复制电脑系统&#xff0c;所以又到了需要重装IDE配置开发环境的时候了&#xff1b;在安装和导入Java编译器IDEA的时候遇到一些"棘手"问题&#xff0c;这里整理下解决方法以备不时之需&#xff1b; …

【python爬虫】16.爬虫知识点总结复习

文章目录 前言爬虫总复习工具解析与提取&#xff08;一&#xff09;解析与提取&#xff08;二&#xff09;更厉害的请求存储更多的爬虫更强大的爬虫——框架给爬虫加上翅膀 爬虫进阶路线指引解析与提取 存储数据分析与可视化更多的爬虫更强大的爬虫——框架项目训练 反爬虫应对…

Linux的命令

Linux的命令分为四个类型&#xff1a;文件操作命令、系统操作命令、文本处理命令和网络操作命令。下面简单介绍一下常用的Linux命令&#xff1a; 文件操作命令 ls&#xff1a;列出目录下的所有文件和目录。 cd&#xff1a;切换当前目录。 mkdir&#xff1a;创建一个新目录。…

Linux系统的安装

文章目录 1 Linux介绍1.1 Linux是什么1.2 Linux的特点1.3 Linux的应用1.4 Linux的发行版本1.5 Linux的Shell 2 Linux安装2.1 安装方式2.2 什么是VMware2.3 VMware主要功能2.4 什么是CentOS2.5 VMware与CentOS与Linux的关系2.6 VMware安装CentOS的步骤 1 Linux介绍 1.1 Linux是…

Jenkins详解(三)

Jenkins详解(三) 目录 Jenkins详解(三) 1、Jenkins介绍2、Jenkins CI/CD 流程3、部署环境 3.1 环境准备3.2 安装GitLab3.3 初始化GitLab3.4 GitLab中文社区版补丁包安装3.5 修改GitLab配置文件/etc/gitlab/gitlab.rb3.6 在宿主机输入 http://192.168.200.26:88 地址就可以访问了…

【Unity-Cinemachine相机】虚拟相机旋转Composer属性详解

Look At和Aim本质是控制虚拟相机自身的旋转&#xff0c;并不一定非要看着&#xff0c;或者并不一定非要瞄着这里的游戏对象 Look At和Aim是以Look At里面的对象作为参考来旋转自身 Do nothing&#xff1a;表现出来的行为和Look At空出来一样 Composer&#xff1a;是一个标准的…