(图文+视频)老鹿学Ai绘画:Stable Diffusion的安拆、文生图以及绘图初体验
今天禀享内容的视频版如下,视频已添加进度条,各人能够根据本身的需求挈动到想要看看的部门,想要原视频以及软件的鹿友公家号后台撩我获取:
以下是图文版内容:
注释共:3962字 45图
估量阅读时间:10分钟
比来Ai绘图实的太火了,挡都挡不住。
本着“不竭猎奇,不断进修”的理念,我诡计再开野鹿志的一个新干线使命:老鹿学Ai绘图。
在开启新的干线使命之前,那里先阐明一下,因为我本人不是设想师,不是法式员,更不是专业的Ai从业者,仅仅是个业余软件喜好者。
因而写的内容的大部门认知仅限于软件操做以及从收集上学来的一点点理论常识并加上本身的理解分享给各人。
假设过程中存在不敷专业,不敷准确的处所请列位鹿友见谅,我程度就如许。(狗头保命)
展开全文
别的关于软件的抉择,我只晓得两款最火的Ai绘图东西:Midjourney和Stable Diffusion。
Midjourney的效果很好,利用起来相对进修成本低一些,但是它付费的,而且要利用完全功用一年下来费用也不低:
而Stable Diffusion做为开源软件,我们能够通过一些操做停止离线免费利用,效果也不错而且可玩性更高一些,因而我的抉择是Stable Diffusion。(以下简称SD)
利用离线版SD,mac系统和win系统都能够用,本文所有内容均基于win系统停止介绍,mac系统的鹿友可能需要在网上找找其他相关的教程。
别的利用SD对系统的硬件也有必然的要求:
1、内存至少16G,越大越好。
2、显卡更好是N卡,显存同样越大越好:
至少4G,牵强能出图。
6G略微好一点,可能部门功用无法利用。
8G除了大模子操练不可,其他功用都能够用。
12G及以上则无任何限造。(我的显卡是1070 8G显存)
3、A卡用户应该也能用,那个需要自行测试,但是出图可能会很慢。
因为我本身写那篇文章的时候,也就只是周末玩了两个下战书,括弧捂嘴笑括弧完毕。
所以今天禀享的文章旨在让感兴致而且还完全没有用过的鹿友可以尽快用起来,至于软件更多复杂的操做功用我们后面有时机再陆续分享。
01
软件安拆
和其他的通俗软件差别,安拆SD离线版到当地步调相对来说比力复杂,需要摆设情况设置装备摆设。
网上有良多教你从零起头摆设情况设置装备摆设的教程,感兴致的鹿友能够看看,不外关于我那种软件喜好者来说体验成本略高。
所以我那里利用的是B站up主@秋葉aaaki分享的整合包,即压即用,十分便利,感激大佬的分享:
为了让安拆时候的界面和各人连结一致,我那里删除了已经安拆的SD从头和各人过一次流程。
当你下载完秋叶整合包以后里面有三个文件夹:
novelai-webui那个文件夹里就是SD离线版的主法式,里面是个压缩包,把它解压到一个有足够空间的硬盘里。
SD解压存放的硬盘空间必然要大,因为后期可能还会安拆额外的插件或者模子:
来到SD的解压目次,能够看到整合包里已经包罗了一般摆设情况所需要的git和python还有启动器,但默认情状下双击启动器会报错,报错以后我们点击否:
那时回到我们适才下载的第二个喊做sd-webui启动器的文件夹里,双击启动器运行依靠而且安拆:
安拆完成之后再次双击启动器,就能够一般翻开了,启动器也会主动检测并设置装备摆设你的显卡型号以及显存大小:
我们先来看看启动器的页面规划,假设你在SD利用过程中碰着报错等问题,能够在疑难杂症那个栏位利用扫描功用检测,更多问题能够联络开发者秋叶:
版本治理里面我们能够先更新一下启动器的版本,间接点击安拆就能够了:
模子治理里能够下载各类类此外模子,那个我们先不管它:
扩展治理里面能够更新以后我们要用到的插件之类的工具,管它呢,先一键更新再说:
最初小东西栏位是我们后面绘图可能会用到的一些网站,各人感兴致能够点来看看:
接下来我们回到高级选项,默认情状下会勾选启动完毕后主动翻开阅读器,然后点击一键启动:
第一次启动的时候,那里会弹出一个文本文档,你需要在那里手动输进我已阅读并附和用户协议,然后保留封闭文档,不然无法进进下一步:
因为前面我们勾选了主动翻开阅读器,所以当你看到那个页面时,那么恭喜你已经胜利安拆SD,假设阅读器没有主动翻开,能够在地址栏手动输进127.0.0.1:7860也能够:
SD安拆胜利以后还没有完,记得适才我们下载的整合包里有三个文件夹么,第三个文件夹里是两个SD官方的根底主模子:
SD目前大致有五类模子,抉择好的模子关于Ai绘图长短常重要的,至于那些模子有什么区别我们以后有时机再分享。
如今各人只需要跟着我操做就行了,把那两个主模子复造到SD安拆目次models\Stable-diffusion里:
回到SD的webui页面,左上角第一个栏位就是主模子的选项卡,我们点击蓝色按钮刷新,适才的两个主模子就加载出来了:
02
文生图的界面概述
如今我们看到的SD界面就是刚进手最常见的界面了-文生图,望文生义就是文字生成图片。
因为参数比力多,全数介绍完篇幅可能会很长,所以我们那里先简单介绍几个最随便影响绘画的板块。
页面的左上方我们前面已经介绍过了是抉择主模子的处所,旁边是加载VAE的处所,至于VAE是什么我们以后再说,再接下来的Clip 跳过层我们暂时用不到,能够不管:
往下走是横向的功用模块包罗文生图、图生图等,同样其他的功用我们以后再说。
下面两个大的框就是我们的提词框了,别离是正向提词框和反向提词框,简单理解就是你想要什么和你不想要什么:
提词框内的内容需要输进英文,它自己撑持天然语言的,但仍是定见用逗号分隔的一个个的关键词来写。
例如一只狗站在草地上,我们能够写成:A dog standing on the grass:
但是定见写成1dog,stand,grass,可能是那个意思,和美丑没有关系,只是便利我们以后加进更多提词或者权重,那个以后再说:
右侧的生成按钮就不消说了,下面的第一个小箭头鼠标停行在上面就会有功用提醒。
能够将例如你在C站上复造的生成信息间接填写到对应的栏位包罗摘样等,假设当前你的提词框为空则填进上一次的内容。
那个我们后面再说,旁边的垃圾桶按钮就是清空那些信息:
有时候我们会有一些常用的提词,能够按箭头处的保留将它保留为模板便利再次利用,别的两个别离是抉择模板和填写模板:
别的秋叶的那个整合包是主动帮我们添加了一个通用起手式模板的,正向词是杰做、高量量,反向词翻译一下可能是那些:
因为我们用的是中文版的界面,所以红色方框的内容各人根本看都能看大白,那里只说简单说几个点:
摘样迭代步数越高图像生成时间越长越切近你的提词描述,但是过高反而会出错,凡是20-30到手动测验考试。
摘样办法也就是摘样器的算法那个也需要手动测验考试,差别的摘样体例效果也会有差别,比力常用的是DPM++。
宽度和高度也就是辨认率的抉择和你的模子有关,相信的我们以后再说,总之记不克不及过高,不然画出来的图会出错而且显存也不敷。
提醒词相关性CFG数值越高越接近你的提词信息,但是数值过高也会出错,同样需要手动测验考试。
随机种子望文生义根据你的提词随机生成一张图:
随机种子那里多说一句,例如你画出的图大致觉得你觉得不错想要保留那个大效果,能够点击旁边的绿色按钮,随机种子就会固定到数值:
那个时候你再往添加提词等,它就会尽量的在你原有的图片觉得上往生成新的图像,重视辨认率假设改动的话,同样画面也会改动:
右边的文件夹按钮能够翻开我们画图的保留位置:
03
模子下载及绘图初体验
文生图可能的参数我们过了一次就来本身脱手绘图尝尝吧,我前面提到了Ai绘图你用的模子量量很重要。
官方自带的3个很根底模子其实我们通俗很少用,因而我们需要往下载其他更好的模子。
我们前面提到了在启动器的插件治理里,能够间接下载各类模子,那里下载的益处是国内收集也能够间接下载,但缺点就是大部门模子你无法预览,不晓得它的内容:
因而那里仍是选举各人能够通过C站往下载更多高量量的模子,网址是:civitai.com,当然缺点很明显,需要魔法:
例如我觉得那个喊Deliberate的模子不错就能够间接点进往免费下载:
别的下载模子前我们需要重视那是一个什么类型的模子,它决定我们下载以后的存放位置以及利用办法。
那里能够看到模子类型写的是Checkpoint,属于主模子,再次阐明更多模子的常识我们以后分享:
和官方的根底主模子一样,我们需要把它放到SD安拆目次models\Stable-diffusion里,那个模子我同样也会分享给各人:
安拆好以后我们刷新一下SD的页面,就能够在左上角看见下载的模子了,或者点击生成下面的红色按钮也能够找到:
如今模子有了,但是我们新手凡是最头疼的是不晓得该怎么写提词,那里我的定见是先抄,看他人是怎么写的提词。
回到C站,点击此中的一张你觉得不错的图下方符号会弹出那张图片的生成信息:
然后点击拷贝生成信息:
回到SD页面将所有的信息复造到提词框里然后点击生成按钮下面的小箭头:
如许包罗正反提词,摘样、摘样体例、种子等城市主动填写到对应的栏位:
那时间接点击生成就能够得到一张不错的图了,不外你可能会发现为什么我们参数都不异但是和原图纷歧样呢?
Ai绘图确实即使参数一样,也很难做到和原做者完全不异,那个我看有说法是和硬件算力也有关系:
在此根底上我们能够把提词中的信息改一改,例如我那里添加了红色金属、高科技、机械铠甲等提词。
不外如今鬼畜了,生成的图里面多了一个手和胳膊出来:
我们那里能够在反向词里找到那个“余外肢体”的提词,把它放在最前面,提词越靠前,代表它的权重越重,再生成一下看看,就好多了:
最初生成出来用ps简单的加点文字润饰,一张看着挺唬人的海报就出来了:
以上就是今天想要分享的内容,固然生成出来的图还不错,但是小我觉得没有什么成就感,哈哈哈。
更多详尽的内容我们以后有时间再分享,期看今天的内容对各人有所搀扶帮助,期看列位鹿友一键三连撑持哦!
更多内容欢送存眷公家号:
本文由“野鹿志”发布
转载前请联络马鹿野郎