網(wǎng)友評(píng)分:
5.5分
Disco Diffusion離線版AI繪畫程序是一款非常專業(yè)的AI自動(dòng)繪畫程序,該版本提供Stable Diffusion動(dòng)畫、Dream Booth訓(xùn)練、音視頻識(shí)別轉(zhuǎn)字幕功能等,同時(shí)可根據(jù)輸入的描述關(guān)鍵詞渲染出對(duì)應(yīng)的圖像,可以在Google Drive 中直接運(yùn)行或者部署到本地運(yùn)行,讓你輕松進(jìn)行繪畫制作,免費(fèi)下載。
1、描述詞設(shè)定:描述詞之前手動(dòng)修改json文件經(jīng)常有小伙伴少輸入標(biāo)點(diǎn)導(dǎo)致出錯(cuò),界面化可以避免這個(gè)問題,如下默認(rèn)的描述,每段(回車換行算一段)都是同一描述的不同權(quán)重關(guān)鍵詞。
上面的描述對(duì)應(yīng)的手動(dòng)修改json如下,也就是界面化無需引號(hào)、逗號(hào)來分割同一描述的不同權(quán)重部分。
隊(duì)列模式下的描述詞設(shè)定:當(dāng)如下勾選了隊(duì)列模式后,通過固定的句式,可以生成大量的配置文件,也就可以實(shí)現(xiàn)生成多套參數(shù)的圖。
比如我的文字描述這樣描述:a beautiful girl by {400|1|藝術(shù)家},當(dāng)點(diǎn)擊保存設(shè)置后就會(huì)生成400個(gè)藝術(shù)家的不同配置文件。注意這個(gè)格式{400|1|藝術(shù)家}中的{}、|這些不能缺少,完全按照固定格式來,400代表生成400個(gè)配置文件,1代表by一個(gè)藝術(shù)家名字(如果設(shè)置成2就代表by兩個(gè)藝術(shù)家名字混搭),藝術(shù)家代表的是軟件目錄下【描述風(fēng)格庫】文件夾下的藝術(shù)家.csv文件,而藝術(shù)家.csv文件如下所示,兩列數(shù)據(jù):
軟件支持各位自建這種語料庫,大家可以復(fù)制csv建立副本,然后在副本里修改,注意也是按照兩列格式來,第一列是描述,第二列是解釋。比如下面我建的顏色.csv文件,簡(jiǎn)單寫了一下,也是一定嚴(yán)格兩列來哈,且都放在軟件目錄下的【描述風(fēng)格庫】文件夾。
2、幫助相關(guān):對(duì)于大多數(shù)參數(shù),都加入了幫助按鈕,鼠標(biāo)劃到對(duì)應(yīng)幫助圖標(biāo),駐留即可顯示參數(shù)含義,如下所示,當(dāng)然大多數(shù)都是翻譯的官方文檔,加入自己的一點(diǎn)注解。
如果想要加入自己對(duì)參數(shù)的注釋,可以修改軟件目錄下的tip.json,如下對(duì)應(yīng)的描述修改即可,\n為換行。
3、參考圖:參考圖也人性化了,直接點(diǎn)擊按鈕選擇圖片即可,注意看參數(shù)旁邊的問號(hào),一般加入?yún)⒖紙D時(shí),skip_steps這個(gè)參數(shù)需要設(shè)置大一些。
參考圖的可玩性很高,比如下面的圖都是基于參考圖,用的自定義模型人像1.5,AI繼續(xù)繪制的,有的圖我也不用貼上參考圖了吧:
隊(duì)列模式下的參考圖:當(dāng)如下勾選了隊(duì)列模式后,可以批量選擇多張參考圖,可以生成大量的配置文件,也就可以實(shí)現(xiàn)生成相同參數(shù)但參考圖不同的圖。
4、AI作畫模型選擇:參數(shù)設(shè)置里提供兩種繪圖Diffusion模型引擎選擇,原版DD、像素版DD以及其他自定義的PT格式模型
像素模式作畫引擎也可以試試
自定義模型比如選擇國(guó)畫風(fēng)或者人像的PT模型文件,然后保存設(shè)置即可。
5、擴(kuò)散模型訓(xùn)練:上面的自定義模型,諸如人像和國(guó)畫都可以通過訓(xùn)練來實(shí)現(xiàn),如下點(diǎn)擊自己訓(xùn)練Diffusion模型按鈕即可打開訓(xùn)練設(shè)置界面,4.1版本支持在原來的模型基礎(chǔ)上繼續(xù)訓(xùn)練,支持訓(xùn)練多少步停下訓(xùn)練,
6、提前終止作畫:當(dāng)作畫步數(shù)超過5步時(shí),點(diǎn)擊提前終止按鈕即可終止作畫
動(dòng)圖封面
7、導(dǎo)入配置:支持導(dǎo)入圖片輸出目錄images_out文件下的DD作畫json配置文件或者生成的圖片,如下點(diǎn)擊導(dǎo)入配置按鈕即可:
默認(rèn)寫入作圖參數(shù)到輸出圖片中,考慮到隱私問題,軟件支持去掉此功能
8、AI圖片描述解析:按鈕點(diǎn)擊,選擇圖片,稍等片刻即可顯示出描述,當(dāng)然這個(gè)描述有所出入,但當(dāng)作描述來用畫出的圖也確實(shí)不錯(cuò)。
功能二:SD(Stable Diffusion)作畫
SD作畫功能和DD功能基本一致,同樣支持隊(duì)列模式、參考圖等功能,SD作畫速度更快,且畫的更加具象,下面主要介紹SD的參數(shù)設(shè)置。同樣SD也是具有文字描述和參考圖功能,還有一些其他參數(shù),大家可以鼠標(biāo)懸停到參數(shù)旁邊的問號(hào)就會(huì)有說明。
1、描述詞設(shè)定:描述詞句式基本和DD一樣,但SD作畫多了個(gè)負(fù)描述,負(fù)描述默認(rèn)可以不寫,負(fù)描述如果寫,就代表不想讓繪畫結(jié)果出現(xiàn)的元素。
2、繪圖參數(shù):圖片尺寸和DD一樣,需要64的倍數(shù),當(dāng)然隨便填寫尺寸也行,軟件會(huì)自動(dòng)轉(zhuǎn)換;繪圖步數(shù)和DD類似,不過SD步數(shù)50就夠了,多了沒啥意義;繪制圖片輪數(shù)代表每次畫幾張圖;描述相關(guān)度默認(rèn)數(shù)值就可以,當(dāng)然可以嘗試10以上數(shù)值;隨機(jī)種子默認(rèn)0,代表每次種子隨機(jī),設(shè)置大于零的固定值,如果其他參數(shù)一樣,則SD出圖完全一樣,這點(diǎn)和DD不一樣哈。
3、顯存占用模式選擇:軟件提供不同顯存占用模式:適中、低、很低、非常低、高和極高幾種模式,其中非常低可以實(shí)現(xiàn)4G顯存畫出1024×1024極限尺寸,當(dāng)然速度也比較慢,且至少需要16G內(nèi)存;而高可以實(shí)現(xiàn)自適應(yīng)顯存占用,速度比較均衡。
4、16代黑圖問題:針對(duì)GTX 16系列,諸如1660等顯卡,SD作畫會(huì)黑圖,需要勾選選項(xiàng),可以正常出畫。
5、參考圖:和DD一樣,SD也支持參考圖,不過參數(shù)比較簡(jiǎn)單,基本上就是導(dǎo)入原圖,修改描述,設(shè)置圖片差異度參數(shù)即可,注意差異度參數(shù)范圍0-1,1代表與參考圖差異最大哈。
試試SD參考圖,實(shí)現(xiàn)真人參考圖用二次元描述實(shí)現(xiàn)真人二次元效果
6、動(dòng)畫:SD動(dòng)畫選擇2D,即可開啟動(dòng)畫模式,動(dòng)畫也可以設(shè)置參考圖,支持動(dòng)畫變化角度、縮放大小、xyz軸移位等。
文字描述需要如下格式,每一次換行都是一個(gè)過渡描述,每個(gè)過渡描述末尾三個(gè)冒號(hào)后面跟著的數(shù)字,代表動(dòng)畫幀數(shù)。
SD動(dòng)畫如果選擇參考視頻,則可以導(dǎo)入視頻,實(shí)現(xiàn)視頻風(fēng)格轉(zhuǎn)換,參考視頻模式下,就和逐幀參考圖一個(gè)意思了,只是比較便捷。
7、自定義SD模型選擇:支持選擇第三方ckpt格式的SD模型,如下所示,選擇ckpt所在路徑即可實(shí)現(xiàn)利用第三方ckpt模型作畫。
8、圖片風(fēng)格仿造:這個(gè)功能需要至少16G顯存,無需描述,導(dǎo)入圖片即可實(shí)現(xiàn)圖片仿造,目前僅是個(gè)實(shí)驗(yàn)功能,效果不是太穩(wěn)定
9、局部修改:點(diǎn)擊局部修改按鈕,可以實(shí)現(xiàn)涂鴉部分區(qū)域?qū)崿F(xiàn)局部修改功能,此功能效果也比較有限,改臉什么的還可以
10、Dream Booth訓(xùn)練:DB訓(xùn)練是非常厲害的一個(gè)功能
DB訓(xùn)練是非常厲害的一個(gè)功能,點(diǎn)擊打開進(jìn)入DB訓(xùn)練界面,DB實(shí)現(xiàn)的功能是學(xué)會(huì)你訓(xùn)練圖片的風(fēng)格或者相貌。我來舉個(gè)例子,我訓(xùn)練圖和正則圖都選擇四張滑稽表情。
然后標(biāo)識(shí)詞寫做huaxiaoji,項(xiàng)目名隨便寫我來舉個(gè)例子,我訓(xùn)練圖和正則圖都選擇四張滑稽表情;訓(xùn)練設(shè)備支持CPU(需要16G內(nèi)存,挺慢)和顯卡(需要24G顯存),模型尺寸256和512選擇,我選擇256就不錯(cuò),后面參數(shù)是ckpt模型保存及訓(xùn)練停止步數(shù),一般400-800步效果不錯(cuò)。
訓(xùn)練完后,在模型輸出目錄找到ckpt文件,然后SD模型自定義選擇這個(gè)ckpt文件,正常描述即可,注意描述里帶著huaxiaoji標(biāo)識(shí)詞,如下都是滑稽模型出的圖:
當(dāng)然參考圖也支持哈,人像二次元滑稽化
功能三:圖片AI高清放大
設(shè)置不同的放大模型和圖片放大倍數(shù),高清放大圖片輸出目錄為軟件目錄\images_out\AI_ultra_HD,當(dāng)輸入的圖片尺寸很大時(shí),容易超顯存,這時(shí)我們修改拼圖大小這個(gè)參數(shù)即可,比如設(shè)置拼圖大小512時(shí),6G顯存選擇realesrgan_x4plus模型對(duì)1920*1080圖片進(jìn)行4倍放大測(cè)試不超顯存。
AI高清放大是一個(gè)免費(fèi)的獨(dú)立功能,如下軟件主界面點(diǎn)擊高清放大按鈕,選擇圖片(支持批量),即可高清放大圖片。
小圖經(jīng)過高清放大的對(duì)比效果,二次元和三次元都能勝任。
功能四:老照片修復(fù)
軟件主界面點(diǎn)擊老照片修復(fù)按鈕,選擇圖片(支持批量),即可高清修復(fù)老照片,僅對(duì)人像進(jìn)行高清修復(fù)。
功能五:AI圖片轉(zhuǎn)3D
AI圖片轉(zhuǎn)3D輸出視頻目錄:軟件目錄\video;AI圖片轉(zhuǎn)3D也是一個(gè)獨(dú)立免費(fèi)功能,如下參數(shù)設(shè)置可以設(shè)置生成視頻時(shí)長(zhǎng)和攝像頭位置(位置一般不改):
然后,主界面點(diǎn)擊圖片轉(zhuǎn)3D,選擇圖片(支持批量),轉(zhuǎn)換圖片成如下的視頻形式,這個(gè)轉(zhuǎn)換速度較慢,5到30分鐘一張圖。
基本上就是原作項(xiàng)目介紹的這種效果,一張精圖轉(zhuǎn)換成3D的效果,不過相比原作我做了改進(jìn),支持原圖尺寸大小的視頻。
功能六:圖片風(fēng)格仿造
點(diǎn)擊圖片風(fēng)格仿造按鈕,選擇圖片即可自動(dòng)出幾張風(fēng)格相近的圖,此功能需要至少10GB顯存,參數(shù)設(shè)置可以設(shè)置每次仿造圖片數(shù)。
功能七:二次元生成
點(diǎn)擊二次元小姐姐生成按鈕,即可繪制上百張二次元圖片
可在參數(shù)設(shè)置里,設(shè)置各種參數(shù)以生成不同類型的二次元小姐姐
功能八:三次元生成
和二次元生成功能一樣,如下點(diǎn)擊三次元生成按鈕,即可繪制多張三次元全身圖
可在參數(shù)設(shè)置里,設(shè)置各種參數(shù)以生成不同類型的三次元圖片
1、Stable Diffusion(下面簡(jiǎn)稱SD)作畫功能支持2D動(dòng)畫功能(支持參考圖模式,選擇參考圖,即可以參考圖引導(dǎo)動(dòng)畫幀生成;支持三軸移動(dòng)、縮放、角度調(diào)整等)、參考視頻功能,動(dòng)畫模式2D輸入描述支持幀數(shù)設(shè)置,如下?lián)Q行描述(三個(gè)冒號(hào)后面跟著幀序號(hào)):
a:::10
b:::20
c:::30
代表,a描述有10幀,b描述20幀。。。。
2、加入Dream Booth模型訓(xùn)練功能,CPU和顯卡兩種方式都可以,顯卡目前24G顯存可以,CPU訓(xùn)練內(nèi)存32G以上估計(jì)就可以;鼠標(biāo)懸停訓(xùn)練參數(shù)旁邊的問號(hào)有參數(shù)解釋;訓(xùn)練完成后會(huì)自動(dòng)在模型目錄對(duì)11GB大小的模型進(jìn)行裁剪到2GB大?。恢С諨B斷點(diǎn)模型選擇;模型名字顯示步數(shù);
3、SD作畫增加局部修改功能,點(diǎn)擊局部修改按鈕,對(duì)圖片繼續(xù)涂鴉,即可局部修改,不過此功能效果有些圖片有限;
4、SD文字描述支持負(fù)描述,所謂負(fù)描述就是不想讓畫面出現(xiàn)的元素;
5、SD支持調(diào)用第三方的ckpt格式的SD模型,SD參數(shù)設(shè)置下方選擇自定義模型按鈕即可;
6、SD支持圖片仿造功能,不過需要至少16G顯存,SD參數(shù)設(shè)置最下方,選擇待仿造圖片,無需描述,即可生成類似風(fēng)格圖片;
7、SD作畫16代顯卡黑圖問題修復(fù),SD設(shè)置里勾選16代即可;
8、伴奏人聲分離4G顯卡可以用了,伴奏人聲分離設(shè)置勾選低顯存占用模式即可;
9、加入音視頻轉(zhuǎn)文字功能,批量選擇音視頻,即可生成srt字幕文件和純文字txt版文件,支持大量國(guó)外語言; 10、修復(fù)圖片轉(zhuǎn)3D找不到圖片的報(bào)錯(cuò)問題;
11、修復(fù)圖片高清放大、老照片修復(fù),DD或SD作畫寫到圖片的配置丟失問題。
標(biāo)簽: AI作畫 Disco Diffusion
關(guān)于本站|下載幫助|下載聲明|軟件發(fā)布|聯(lián)系我們
Copyright ? 2005-2024 m.daaijiaoyu.cn.All rights reserved.
浙ICP備2024132706號(hào)-1 浙公網(wǎng)安備33038102330474號(hào)