查看原文
其他

Disco Diffusion AI作画离线版V3.8,人像、国画都能画,还能自己训练绘画模型,小说也能写!

万能小编辑 万能君的软件库 2022-08-01

「本期内容标签」

安卓 iOS 电脑 小程序 网站 游戏 教程

本周V3.8带来了自己训练扩散模型功能和AI写小说功能,如下是我用3000张国画训练的国画模型画出来的图:

如下人像模型的生成图:

V3.8版本:2022-07-18

1、加入自定义的几种模型:人像模型、科幻模型、国画模型,使用这几种模型后,画出的风格倾向于模型对应的风格;

2、加入自己训练扩散模型的功能,这样上面的自定义模型,你也可以自己训练,6GB显存就能训练出国画模型;  

3、加入AI写小说功能,这个功能比较简单,输入开头,即可续写;

4、图片风格仿造功能,支持仿造图片数量设置,此功能10GB显存以下目前直接不让用了,因为跑不动;  

5、二次元小姐姐生成功能轮播模式,支持设置轮播时长;

6、删除参数设置里的go_big模式,此模式一直没做占空,现在测试作用不大;

7、其他bug修复。

再来几张我用离线版跑常规模式DD5跑的图:

01

软件概览

软件名字叫做:AI作画离线版V3.8(基于Disco Diffusion 5.3),基于GitHub上的开源项目Disco Diffusion,目前仅支持静态图生成。

如下,软件主界面,还是以操作简单为主:


02

软件安装

软件非常大,因为有很多离线模型,当然下载过2代的,这些模型可以复用哈。下载完成后,按照网盘里的word教程即可进行体验

直接参考B站视频进行安装:https://www.bilibili.com/video/BV1Ca411S71s

软件界面如下所示:

03

软件功能介绍

功能一:Disco Diffusion作画

软件目录文件夹的settings.json就是作图配置文件,当然离线版本可通过界面进行设置了。

1、描述词设定描述词之前手动修改json文件经常有小伙伴少输入标点导致出错,界面化可以避免这个问题,如下默认的描述,每段(回车换行算一段)都是同一描述的不同权重关键词。

上面的描述对应的手动修改json如下,也就是界面化无需引号、逗号来分割同一描述的不同权重部分。

2、帮助相关对于大多数参数,都加入了帮助按钮,鼠标划到对应帮助图标,驻留即可显示参数含义,如下所示,当然大多数都是翻译的官方文档,加入自己的一点注解。

如果想要加入自己对参数的注释,可以修改软件目录下的tip.json,如下对应的描述修改即可,\n为换行。

3、参考图参考图也人性化了,直接点击按钮选择图片即可,注意看参数旁边的问号,一般加入参考图时,skip_steps这个参数需要设置大一些

参考图的可玩性很高,比如下面的图都是基于参考图AI继续绘制的,哪张是参考图各位肯定能看出来:

4、AI作画引擎选择参数设置里提供两种绘图Diffusion模型引擎选择,原版DD、像素版DD以及其他自定义的PT格式模型,如下图设置:

像素模式作画引擎也可以试试,如下就是像素风格的图,也挺有意思:

自定义模型比如选择国画风或者人像的PT模型文件,即可做出文章开头的国画风和人像。

5、扩散模型训练上面的自定义模型,诸如人像和国画都可以通过训练来实现,如下点击自己训练Diffusion模型按钮即可打开训练设置界面,具体操作可以看视频:https://www.bilibili.com/video/BV1Ca411S71s

功能二:图片AI高清放大

设置不同的放大模型和图片放大倍数,高清放大图片输出目录为软件目录\images_out\AI_ultra_HD,当输入的图片尺寸很大时,容易超显存,这时我们修改拼图大小这个参数即可,比如设置拼图大小512时,6G显存选择realesrgan_x4plus模型对1920*1080图片进行4倍放大测试不超显存。

AI高清放大是一个免费的独立功能,如下软件主界面点击AI高清放大按钮,选择图片(支持批量),即可高清放大图片。

如下,小图经过高清放大的对比效果,二次元和三次元都能胜任。


AI绘画输出图片目录软件目录\images_out,如下主界面下方点击打开图片输出目录按钮即可打开。

功能三:AI图片转3D

AI图片转3D输出视频目录:软件目录\video;AI图片转3D也是一个独立免费功能,如下参数设置可以设置生成视频时长和摄像头位置(位置一般不改):

然后,如下软件主界面点击AI图片转3D,选择图片(支持批量),转换图片成如下的视频形式,这个转换速度较慢,5到30分钟一张图。

基本上就是原作项目介绍的这种效果,一张精图转换成3D的效果,不过相比原作我做了改进,支持原图尺寸大小的视频

功能四:图片风格仿造

如下点击图片风格仿造按钮,选择图片即可自动出几张风格相近的图,此功能需要至少10GB显存,参数设置可以设置每次仿造图片数。

功能五:二次元小姐姐生成

如下点击二次元小姐姐生成按钮,即可绘制上百张二次元图片:

如下可在参数设置里,设置各种参数以生成不同类型的二次元小姐姐:

功能六:AI写小说

如下点击AI写小说按钮,设置开头,即可续写不同轮数的文字:

04

显卡要求

需要至少5GB显存,且必须是英伟达显卡,AMD不支持。

各种显存测试参数可参考:https://docs.qq.com/sheet/DTGxSSkNJcnVhV1VP。

注:默认参数因为选了3个CLIP模型,如果想要尺寸更大,少选几个模型即可,但效果肯定有所影响,诸如6G独显的2060或者1060显卡,只选如下第一个模型,尺寸768×512都没问题:

05

常见错误

1、爆显存

下面这些都是图片设置过大导致的爆显存,或者5GB以下的显卡:

(1) Unable to find a valid cuDNN algorithm to run convolution

(2) CUDA out of memory

2、黑图

很多小伙伴生成的图一直是黑的,这种貌似是10代及以下显卡,目前发现的1660、1660s、1660ti都有问题,原因是中途生成NAN数据,解决方案正在寻找,但1060没有问题,看来问题都在16代显卡上

06

激活

软件点击AI作画按钮后,会弹出激活窗设定,按照指示联系我获取激活码即可。

07

小结

这个项目确实很有意思,唯一的问题就是对显卡要求高,最起码需要英伟达5G及以上显存,AMD等其他显卡不支持,另外还有一些坑要填,诸如很多网友感兴趣的动画等,这个得慢慢来了,但后续版本肯定会有,感兴趣的可以体验一下3.8版本了,更详细的作图参数、教程多刷刷B站相关视频即可。

08

本期内容获取

方式一:百度网盘https://pan.baidu.com/s/1B0g4MPFe_drP_hRjgEnKGg 提取码:95kh

方式二:天翼网盘

https://cloud.189.cn/t/ZZ7vuyZrMvmm (访问码:7dn8)  

方式三:GitHub

https://github.com/zhaoyun0071/Disco-Diffusion-Local

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存