• 6873阅读
  • 97回复

[AI智能后期]【AI教程】Stable Diffusion 图像生成模型插件 [复制链接]

上一主题 下一主题
 
发帖
343
PS币
212
主贴数
65
鲜花
6981
违规
0
我的相机
PS版本号
PhotoShop
辅佐软件
其他软件
— 本帖被 论坛管理员 执行加亮操作(2023-06-15) —
本来不打算主题帖,看到AI挺热转载一篇 4B<D.i ;}  
\5k[ "8~  
C z4"[C`;  
nC qUg_{D  
前言 ,78 QLh9:  
u\ytiGO*  
本文使用软件为Bilibili社区核心贡献者秋叶大佬发布的整合包,跳过了绝大多数对网络、Python的前置知识要求。这让完全没有编程知识的人也能够从0开始学习使用Stable Diffusion,并且在几乎0调整的前提下就可以享受最新最核心的技术。可以说,从这一天开始,AI绘画,尤其是SD的普及,又得到了更进一步的推动。 NV9D;g$Y  
本文将基于最新的秋叶整合包,结合笔者整合的资源,为大家介绍最基础的概念和安装方式。 b@Ik c<  
-/B}XN W  
E%3WJ%A  
Stable Diffusion(SD)是什么 MH'S,^J  
x7t<F4  
Stable Diffusion是2022年发布的深度学习文本到图像生成模型,它是一种潜在扩散模型,它由创业公司Stability AI与多个学术研究者和非营利组织合作开发。目前的SD的源代码和模型都已经开源,在Github上由AUTOMATIC1111维护了一个完整的项目,正在由全世界的开发者共同维护。由于完整版对网络有一些众所周知的需求,国内有多位开发者维护着一些不同版本的封装包。开源社区为SD的普及做出了难以磨灭的贡献。 ub{<m^|)  
SD最大的特征,就是由于其开源的特性,可以在电脑本地上离线运行。可以在大多数配备至少8GB显存的适度GPU的消费级硬件上运行。笔者推荐显存线是12G。 e~ W35Y>A  
由于AI训练和产出的本质是软硬件结合了的深度学习原理,因此常常会用到英伟达公司的显卡,以及相关的诸如CUDA、CUDNN,乃至python相关的深度学习组件如xformer、pytorch等,学习AI想要进阶的话非常容易碰到这些需要大量额外学习编程知识的内容,所以非常容易让小伙伴们感到困难。 z~A||@4'  
本文以及秋叶包都不会涉及到这些内容,会比原版相对来说容易理解,也容易部署得多得多得多。
d&w g\"E  
7X2g"2\Wm  
E3_e~yu&  
SD基本概念 L<J';#BD  
#v=hiL  
大模型:用素材+SD低模(如SD1.5/SD1.4/SD2.1),深度学习之后炼制出的大模型,可以直接用来生图。大模型决定了最终出图的大方向,可以说是一切的底料。多为CKPT/SAFETENSORS扩展名。 4M6o+WV  
VAE:类似滤镜,是对大模型的补充,稳定画面的色彩范围。多为CKPT/SAFETENSORS扩展名。 c*1t<OAS~  
LoRA:模型插件,是在基于某个大模型的基础上,深度学习之后炼制出的小模型。需要搭配大模型使用,可以在中小范围内影响出图的风格,或是增加大模型所没有的东西。炼制的时候如果基于SD底模,在不同大模型之间更换使用时的通用性会较好。但如果基于特定的大模型,可能会在和该大模型配合时得到针对性的极佳效果。 %QVX1\>]  
ControlNet:神级插件,让SD有了眼睛,能够基于现有图片得到诸如线条或景深的信息,再反推用于处理图片。 Dsm_T1X  
Stable Diffusion Web-UI(SD-WEBUI):开源大神AUTOMATIC1111基于Stability AI算法制作的开源软件,能够展开浏览器,用图形界面操控SD。 8PDt 7 \  
秋叶包:中国大神秋叶开发的整合包。由于WEBUI本身基于GitHub的特性,绝大多数时候的部署都需要极高的网络需求,以及Python环境的需求。使用秋叶整合包,内置了和电脑本身系统隔离的Python环境,以及内置了Git,不需要了解这两个软件就可以运行。可以几乎忽视这样的门槛,让更多人能够享受AI出图。 O!hg@[\B+  
z\oq b) a  
软件部署 f&js,NU"  
8QE0J$d5  
软件下载 l-XiQ#-{  
可以下载笔者整合的资源包。 f /&Dy'OV7  
下载.txt (1 K) 下载次数:8 J1 a/U@"  
E&#AX:  
下载完资源后,我们可以先安装启动器的运行依赖,并解压秋叶包本体。
Jv1.Yz  
dum! AO  
{Lk~O)E  
$s/N;E!t  
37v!:xF!  
当我们解压好启动器本体的时候,暂时还不要启动,先一起把模型安装了。 z=N'evx~  
3K@dW"3  
导入核心数据 FdKp@&O+1  
u<]-%ha$  
uPsn~>(4  
下载推荐大模型文件夹中的模型, WT;=K0W6&  
Qa5<go{  
E O52 E|  
并把文件夹里的所有模型放在这个目录下: F6}Pwz[c  
\sd-webui-aki-v4\models\Stable-diffusion同时,还要下载ControlNet模型, }C}~)qaZv+  
xA`Q4"[I  
I$n 0aR6  
ControlNet模型文件夹里的所有内容,放在这个目录下 `D>PU@s$nT  
}wC pr.@  
\sd-webui-aki-v4\models\ControlNet 14]!LgH  
[j?n}D@L  
go|/I&  
最后,需要单独下载LoRA
?#<Fxme  
r'7;:  
 PQa {5"  
X<x"\Yk  
m_W\jz??k  
这些LoRA是笔者为了方便小伙伴们取用改了名的,需要全部放在这个目录下: ipQJn_:2  
sd-webui-aki-v4\extensions\sd-webui-additional-networks\models\lora >O&(G0!N+}  
#@;RJJZg  
^Gq4Yr  
ivb&J4?y  
!qV{OXdrB  
]\v'1m"  
drBWo|/  
;'`T  
`5r*4N<  
开启软件运行 !Z YMks4  
f#ID:Ap3  
解压并导入完毕上述数据之后,就可以点开启动器了。 0<>I\UN0b  
在安装目录下往下拉,找到这个启动器,双击。 <dV|N$WV  
VSx[{yn  
7Z0 )k9*  
再点击右下角的一键启动。 ~x)Awdlu  
/j0<x^m/  
%DqF_4U9  
再让这个界面跑一会儿 <?yAIhgN*  
eZ[CqUJ&  
GLB7h 9>  
就可以看到它自动在浏览器中打开了一个新的网页,就算是启动成功了。 f+}? $'  
6;dQ#wmg  
`l9Pk\X[  
`4'v)!?  
16条评分鲜花+183
qlt1026 鲜花 +9 谢谢分享,学习了! 2023-08-06
gxnnzhou 鲜花 +9 谢谢分享! 2023-07-11
密林 鲜花 +12 谢谢楼主分享, 2023-07-10
sc6020 鲜花 +7 AI的世界真精彩! 2023-07-05
a上校 鲜花 +5 估计我的电脑带不动 2023-07-02
zwx6789 鲜花 +15 感谢分享!! 2023-06-24
awill 鲜花 +10 谢谢楼主分享。 2023-06-21
船工 鲜花 +20 鲜花补上! 2023-06-15
s912666h 鲜花 +9 谢谢分享。 2023-06-15
yueren1015 鲜花 +20 欣赏学习,小跑献花。 2023-06-15
kengkong 鲜花 +11 精彩,感谢分享! 2023-06-15
风无忌 鲜花 +6 多谢分享! 2023-06-14
知名不具 鲜花 +12 谢谢分享! 2023-06-14
baby1227 鲜花 +20 启动器版本太旧了些,建议用秋叶或妙手的新版整合包 2023-06-14
云彩 鲜花 +10 好大的屁屁! 2023-06-14
aken9193 鲜花 +8 精彩,感谢分享! 2023-06-14
12
发帖
343
PS币
212
主贴数
65
鲜花
6981
违规
0
我的相机
PS版本号
PhotoShop
辅佐软件
其他软件
只看该作者 1楼 发表于: 2023-06-14
软件大概10G左右 X!ZUR^  
\HF|&@}hU  
C站网址:https://civitai.com/  可下载各路大神的模型 w!,~#hbt6  
L9M0vkgri  
;{[&&qMwU  
~2@+#1[g8z  
发帖
343
PS币
212
主贴数
65
鲜花
6981
违规
0
我的相机
PS版本号
PhotoShop
辅佐软件
其他软件
只看该作者 2楼 发表于: 2023-06-14
如果打不开C站,国内也有模型下载,处于发展阶段 1O3"W;SR<:  
网址:https://www.xtimesai.com/  G`8i{3:  
! eXDN  
发帖
343
PS币
212
主贴数
65
鲜花
6981
违规
0
我的相机
PS版本号
PhotoShop
辅佐软件
其他软件
只看该作者 3楼 发表于: 2023-06-14
如果不想下载软件,也可以在网站上运行,正处于开发阶段,只有MJ创作 :+u K1N  
网址:http://www.i-desai.com/ 国内的 J; @g#h?  
JR>v  
3>O=d>  
$7\Al$W\  
发帖
1630
PS币
45188
主贴数
87
鲜花
19874
违规
0
我的相机
5D4
PS版本号
PhotoShop CC2024
辅佐软件
DxO系列
只看该作者 4楼 发表于: 2023-06-14
谢谢分享,怎么使用,还没有详细介绍
发帖
343
PS币
212
主贴数
65
鲜花
6981
违规
0
我的相机
PS版本号
PhotoShop
辅佐软件
其他软件
只看该作者 5楼 发表于: 2023-06-14
回 一袭掮衣 的帖子
一袭掮衣:谢谢分享,怎么使用,还没有详细介绍 (2023-06-14 16:41)  9bE/7v  
wfE%` 1  
如果运行Stable Diffusion就复杂了,要训练模型,添加正向词,反向词,不是我能说明白的 6e%|.}U  
QAI!/bB  
看三楼网址,直接在网站上运行
发帖
3196
PS币
3587
主贴数
120
鲜花
137
违规
0
我的相机
佳能5D4  70-200/f2.8
PS版本号
PhotoShop
辅佐软件
LightRoom
只看该作者 6楼 发表于: 2023-06-14
精彩,感谢分享!
发帖
5928
PS币
2565
主贴数
23
鲜花
20622
违规
0
我的相机
尼康D810  24-70
PS版本号
PhotoShop CC2015
辅佐软件
LightRoom
只看该作者 7楼 发表于: 2023-06-14
AI现在发展很快,再不学习,我们的知识就会被远远的甩在后面了。
发帖
6737
PS币
9478
主贴数
249
鲜花
59843
违规
0
我的相机
尼康F8
PS版本号
PhotoShop CC2022
辅佐软件
其他软件
只看该作者 8楼 发表于: 2023-06-14
      谢   谢      分享    !
发帖
6356
PS币
928
主贴数
62
鲜花
5404
违规
0
我的相机
SH50xh
PS版本号
PhotoShop CC2018
辅佐软件
美图秀秀
只看该作者 9楼 发表于: 2023-06-14
好大的屁屁!
快速回复
限100 字节
如果下载失效,请在论坛管理处办公专贴反馈,查实有奖和补偿损失。
 
上一个 下一个