Part 1 lineart的原理和實(shí)操
【lineart原理】
lineart是一個(gè)專(zhuān)門(mén)提取線稿的模型,可以針對(duì)不同類(lèi)型的圖片進(jìn)行不同的處理。
點(diǎn)擊選擇“Lineart”理澎,預(yù)處理器和模型就會(huì)自動(dòng)切換
點(diǎn)開(kāi)預(yù)處理器,里面的各種模型可以識(shí)別不同圖片的線稿
- 動(dòng)漫:lineart_anime(動(dòng)漫風(fēng)格的線條) 或 lineart_anime_denoise(細(xì)節(jié)較少的動(dòng)漫風(fēng)格線條)
- 素描: lineart_coarse(具有較重重量的逼真風(fēng)格的線條)
- 寫(xiě)實(shí):lineart_realistic(寫(xiě)實(shí)風(fēng)格的線條)
- 黑白線稿:lineart_standard
【lineart模型生成圖對(duì)比】
線條藝術(shù)動(dòng)漫
(lineart_anime)線條藝術(shù)動(dòng)漫降噪
(lineart_anime_denoise)線條藝術(shù)逼真
(lineart_realistic)線條藝術(shù)粗糙
(lineart_coarse)
【lineart作用】
它的應(yīng)用場(chǎng)景主要有
- 01提取動(dòng)漫的線稿,再重新上色
- 02給素描圖片上色
- 03上傳自己的照片榆综,提取出線稿,然后生成自己的二次元頭像
- 04給黑白線稿上色
【lineart的具體實(shí)操】
【實(shí)操部分】
controlnet的模型選擇:
預(yù)處理器:lineart_anime 或 lineart_anime_denoise 模型:lineart
【引導(dǎo)圖】
【Lineart預(yù)處理器效果展示】
Lineart預(yù)處理器選擇原圖預(yù)處理圖最后成圖anime
anime-denoise
coarse
realistic
standard
Invert
Colorful dahlia and cynicism flowers on white background. Flat lay, top view.
none
/
【處理時(shí)的注意點(diǎn)】
首先處理動(dòng)漫照片記得要換二次元的大模型
然后關(guān)鍵詞可以寫(xiě)一些質(zhì)量詞铸史,然后描述一下照片里面有什么東西
另外需要注意的是鼻疮,圖片的分辨率大小要設(shè)置的和原先的比例一樣不然照片會(huì)自動(dòng)裁剪放大
【簡(jiǎn)單小結(jié)】
lineart是一個(gè)專(zhuān)門(mén)提取線稿的模型,在實(shí)際使用時(shí):
- 如果是動(dòng)漫圖片呢琳轿,預(yù)處理器模型則選擇anime或anime_denoise判沟,相對(duì)來(lái)說(shuō),anime_denoise比anime細(xì)節(jié)更多一點(diǎn)崭篡;
- 如果是素描圖片挪哄,則建議使用coarse,它從圖片中粗略提取線稿圖媚送,忽略不突出的細(xì)節(jié)中燥,生圖時(shí)自由度更高;
- 寫(xiě)實(shí)圖片呢塘偎,建議選擇realistic疗涉;
- 黑白線稿呢,則可以選擇standard吟秩;
- 顏色反轉(zhuǎn)咱扣、反色圖片,則適合從白色背景涵防、黑色線條的圖片中提取線稿圖闹伪;
- 不使用預(yù)處理器,需要直接上傳一張?zhí)幚砗冒拙€黑景線稿圖
part2 softedge的原理和使用
【基礎(chǔ)原理】
相比lineart呢,softedge只能識(shí)別圖片大概的輪廓細(xì)節(jié)偏瓤,線條比較柔和杀怠,這樣給SD發(fā)揮的空間就比較大
【實(shí)操部分】
controlnet的模型選擇
預(yù)處理器:softedge_pidient 模型:softedge
【引導(dǎo)圖】
【簡(jiǎn)單小結(jié)】
Softedge也是一個(gè)專(zhuān)門(mén)提取線稿的模型,與之前線稿模型的不同之處在于:
- canny是基于精細(xì)的邊緣檢測(cè)厅克,準(zhǔn)確還原圖片的結(jié)構(gòu)和特征赔退,提取的邊緣圖中的線條是沒(méi)有粗細(xì)、深淺之分的证舟;
- 而Lineart的線條有粗細(xì)深淺的區(qū)別硕旗,相比Canny,除了能夠控制構(gòu)圖女责,還可以更好的還原圖片深度漆枚;
- 同樣相比Canny、Lineart呢抵知,SoftEdge除了穩(wěn)定構(gòu)圖墙基,更好的圖片深度控制,還擁有了更多的自由度辛藻。
簡(jiǎn)單來(lái)說(shuō)碘橘,Canny更注重于細(xì)節(jié)互订,Softedge更偏向框架吱肌,而lineart呢,則介于兩者之間仰禽。
part3 Tile的原理和使用
【基礎(chǔ)介紹】
其核心功能是補(bǔ)全細(xì)節(jié)氮墨,具體一點(diǎn)就是忽略原始圖片中不好的細(xì)節(jié),然后補(bǔ)充新的細(xì)節(jié)吐葵,提高圖片的質(zhì)量规揪。
【具體實(shí)操】
controlnet的模型選擇
預(yù)處理器:tile-resample 模型:tile
比如我們想補(bǔ)全一張模糊圖片的細(xì)節(jié)。
原圖tile預(yù)處理后圖
或者是用tile+定向提示詞來(lái)微調(diào)細(xì)節(jié)
原圖(tile+提示詞)預(yù)處理后圖
這個(gè)功能圖生圖也可以實(shí)現(xiàn)温峭,區(qū)別在于圖生圖更改細(xì)節(jié)的同時(shí)猛铅,也會(huì)變更主體,而tile主體則不變
tile的第三個(gè)功能呢凤藏,就是放大圖片
有了這個(gè)功能奸忽,如果你顯卡不是很高級(jí),那么可以選擇在文生圖的時(shí)候不開(kāi)高清放大揖庄,直接將文生圖產(chǎn)生的圖片批量導(dǎo)入圖生圖中批量處理栗菜,這樣不僅生成的圖片很驚艷而且會(huì)提高很多效率,尤其是AI圖片不要求特定細(xì)節(jié)的時(shí)候蹄梢,用這個(gè)功能簡(jiǎn)直爽爆了疙筹,對(duì)低顯存用戶非常友好。
原圖tile預(yù)處理后圖
這個(gè)放大功能也可以通過(guò)extra-scale實(shí)現(xiàn)
【簡(jiǎn)單小結(jié)】
Tile的核心功能是補(bǔ)全細(xì)節(jié),具體一點(diǎn)就是忽略原始圖片中不好的細(xì)節(jié)而咆,然后補(bǔ)充新的細(xì)節(jié)霍比,提高圖片的質(zhì)量。
- 實(shí)際使用中暴备,它可以修飾模糊桂塞、細(xì)節(jié)損害的圖片;
- 也用tile+定向提示詞來(lái)微調(diào)細(xì)節(jié)馍驯;
- 最后呢阁危,就是放大圖片啦。
另外用tile模型的時(shí)候汰瘫,可以自主選擇狂打,mode的輸出模式有均衡、更注重提示詞混弥、更傾向于controlnet的自由發(fā)揮趴乡。麥克多娜ai自制。