輕松拿捏SD|Controlnet功能講解

Part 1 lineart的原理和實(shí)操

【lineart原理】

lineart是一個(gè)專(zhuān)門(mén)提取線稿的模型,可以針對(duì)不同類(lèi)型的圖片進(jìn)行不同的處理。

點(diǎn)擊選擇“Lineart”理澎,預(yù)處理器和模型就會(huì)自動(dòng)切換

點(diǎn)開(kāi)預(yù)處理器,里面的各種模型可以識(shí)別不同圖片的線稿

  1. 動(dòng)漫:lineart_anime(動(dòng)漫風(fēng)格的線條) 或 lineart_anime_denoise(細(xì)節(jié)較少的動(dòng)漫風(fēng)格線條)
  2. 素描: lineart_coarse(具有較重重量的逼真風(fēng)格的線條)
  3. 寫(xiě)實(shí):lineart_realistic(寫(xiě)實(shí)風(fēng)格的線條)
  4. 黑白線稿:lineart_standard

【lineart模型生成圖對(duì)比】

線條藝術(shù)動(dòng)漫
(lineart_anime)線條藝術(shù)動(dòng)漫降噪
(lineart_anime_denoise)線條藝術(shù)逼真
(lineart_realistic)線條藝術(shù)粗糙
(lineart_coarse)

【lineart作用】

它的應(yīng)用場(chǎng)景主要有

  1. 01提取動(dòng)漫的線稿,再重新上色
  2. 02給素描圖片上色
  3. 03上傳自己的照片榆综,提取出線稿,然后生成自己的二次元頭像
  4. 04給黑白線稿上色

【lineart的具體實(shí)操】

【實(shí)操部分】

controlnet的模型選擇:

預(yù)處理器:lineart_anime 或 lineart_anime_denoise 模型:lineart

【引導(dǎo)圖】

【Lineart預(yù)處理器效果展示】

Lineart預(yù)處理器選擇原圖預(yù)處理圖最后成圖anime

anime-denoise

coarse

realistic

standard

Invert

Colorful dahlia and cynicism flowers on white background. Flat lay, top view.

none

/

【處理時(shí)的注意點(diǎn)】

首先處理動(dòng)漫照片記得要換二次元的大模型

然后關(guān)鍵詞可以寫(xiě)一些質(zhì)量詞铸史,然后描述一下照片里面有什么東西

另外需要注意的是鼻疮,圖片的分辨率大小要設(shè)置的和原先的比例一樣不然照片會(huì)自動(dòng)裁剪放大

【簡(jiǎn)單小結(jié)】

lineart是一個(gè)專(zhuān)門(mén)提取線稿的模型,在實(shí)際使用時(shí):

  1. 如果是動(dòng)漫圖片呢琳轿,預(yù)處理器模型則選擇anime或anime_denoise判沟,相對(duì)來(lái)說(shuō),anime_denoise比anime細(xì)節(jié)更多一點(diǎn)崭篡;
  2. 如果是素描圖片挪哄,則建議使用coarse,它從圖片中粗略提取線稿圖媚送,忽略不突出的細(xì)節(jié)中燥,生圖時(shí)自由度更高;
  3. 寫(xiě)實(shí)圖片呢塘偎,建議選擇realistic疗涉;
  4. 黑白線稿呢,則可以選擇standard吟秩;
  5. 顏色反轉(zhuǎn)咱扣、反色圖片,則適合從白色背景涵防、黑色線條的圖片中提取線稿圖闹伪;
  6. 不使用預(yù)處理器,需要直接上傳一張?zhí)幚砗冒拙€黑景線稿圖

part2 softedge的原理和使用

【基礎(chǔ)原理】

相比lineart呢,softedge只能識(shí)別圖片大概的輪廓細(xì)節(jié)偏瓤,線條比較柔和杀怠,這樣給SD發(fā)揮的空間就比較大

【實(shí)操部分】

controlnet的模型選擇

預(yù)處理器:softedge_pidient 模型:softedge

【引導(dǎo)圖】


【簡(jiǎn)單小結(jié)】


Softedge也是一個(gè)專(zhuān)門(mén)提取線稿的模型,與之前線稿模型的不同之處在于:

  1. canny是基于精細(xì)的邊緣檢測(cè)厅克,準(zhǔn)確還原圖片的結(jié)構(gòu)和特征赔退,提取的邊緣圖中的線條是沒(méi)有粗細(xì)、深淺之分的证舟;
  2. 而Lineart的線條有粗細(xì)深淺的區(qū)別硕旗,相比Canny,除了能夠控制構(gòu)圖女责,還可以更好的還原圖片深度漆枚;
  3. 同樣相比Canny、Lineart呢抵知,SoftEdge除了穩(wěn)定構(gòu)圖墙基,更好的圖片深度控制,還擁有了更多的自由度辛藻。
    簡(jiǎn)單來(lái)說(shuō)碘橘,Canny更注重于細(xì)節(jié)互订,Softedge更偏向框架吱肌,而lineart呢,則介于兩者之間仰禽。

part3 Tile的原理和使用

【基礎(chǔ)介紹】

其核心功能是補(bǔ)全細(xì)節(jié)氮墨,具體一點(diǎn)就是忽略原始圖片中不好的細(xì)節(jié),然后補(bǔ)充新的細(xì)節(jié)吐葵,提高圖片的質(zhì)量规揪。

【具體實(shí)操】

controlnet的模型選擇

預(yù)處理器:tile-resample 模型:tile

比如我們想補(bǔ)全一張模糊圖片的細(xì)節(jié)。

原圖tile預(yù)處理后圖

或者是用tile+定向提示詞來(lái)微調(diào)細(xì)節(jié)

原圖tile+提示詞)預(yù)處理后圖

這個(gè)功能圖生圖也可以實(shí)現(xiàn)温峭,區(qū)別在于圖生圖更改細(xì)節(jié)的同時(shí)猛铅,也會(huì)變更主體,而tile主體則不變

tile的第三個(gè)功能呢凤藏,就是放大圖片

有了這個(gè)功能奸忽,如果你顯卡不是很高級(jí),那么可以選擇在文生圖的時(shí)候不開(kāi)高清放大揖庄,直接將文生圖產(chǎn)生的圖片批量導(dǎo)入圖生圖中批量處理栗菜,這樣不僅生成的圖片很驚艷而且會(huì)提高很多效率,尤其是AI圖片不要求特定細(xì)節(jié)的時(shí)候蹄梢,用這個(gè)功能簡(jiǎn)直爽爆了疙筹,對(duì)低顯存用戶非常友好。

原圖tile預(yù)處理后圖

這個(gè)放大功能也可以通過(guò)extra-scale實(shí)現(xiàn)

【簡(jiǎn)單小結(jié)】

Tile的核心功能是補(bǔ)全細(xì)節(jié),具體一點(diǎn)就是忽略原始圖片中不好的細(xì)節(jié)而咆,然后補(bǔ)充新的細(xì)節(jié)霍比,提高圖片的質(zhì)量。

  1. 實(shí)際使用中暴备,它可以修飾模糊桂塞、細(xì)節(jié)損害的圖片;
  2. 也用tile+定向提示詞來(lái)微調(diào)細(xì)節(jié)馍驯;
  3. 最后呢阁危,就是放大圖片啦。

另外用tile模型的時(shí)候汰瘫,可以自主選擇狂打,mode的輸出模式有均衡、更注重提示詞混弥、更傾向于controlnet的自由發(fā)揮趴乡。麥克多娜ai自制。

?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
  • 序言:七十年代末蝗拿,一起剝皮案震驚了整個(gè)濱河市晾捏,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌哀托,老刑警劉巖惦辛,帶你破解...
    沈念sama閱讀 212,884評(píng)論 6 492
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場(chǎng)離奇詭異仓手,居然都是意外死亡胖齐,警方通過(guò)查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 90,755評(píng)論 3 385
  • 文/潘曉璐 我一進(jìn)店門(mén)嗽冒,熙熙樓的掌柜王于貴愁眉苦臉地迎上來(lái)呀伙,“玉大人,你說(shuō)我怎么就攤上這事添坊〗肆恚” “怎么了?”我有些...
    開(kāi)封第一講書(shū)人閱讀 158,369評(píng)論 0 348
  • 文/不壞的土叔 我叫張陵贬蛙,是天一觀的道長(zhǎng)雨女。 經(jīng)常有香客問(wèn)我,道長(zhǎng)速客,這世上最難降的妖魔是什么戚篙? 我笑而不...
    開(kāi)封第一講書(shū)人閱讀 56,799評(píng)論 1 285
  • 正文 為了忘掉前任,我火速辦了婚禮溺职,結(jié)果婚禮上岔擂,老公的妹妹穿的比我還像新娘位喂。我一直安慰自己,他們只是感情好乱灵,可當(dāng)我...
    茶點(diǎn)故事閱讀 65,910評(píng)論 6 386
  • 文/花漫 我一把揭開(kāi)白布塑崖。 她就那樣靜靜地躺著,像睡著了一般痛倚。 火紅的嫁衣襯著肌膚如雪规婆。 梳的紋絲不亂的頭發(fā)上,一...
    開(kāi)封第一講書(shū)人閱讀 50,096評(píng)論 1 291
  • 那天蝉稳,我揣著相機(jī)與錄音抒蚜,去河邊找鬼。 笑死耘戚,一個(gè)胖子當(dāng)著我的面吹牛嗡髓,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播收津,決...
    沈念sama閱讀 39,159評(píng)論 3 411
  • 文/蒼蘭香墨 我猛地睜開(kāi)眼饿这,長(zhǎng)吁一口氣:“原來(lái)是場(chǎng)噩夢(mèng)啊……” “哼!你這毒婦竟也來(lái)了撞秋?” 一聲冷哼從身側(cè)響起长捧,我...
    開(kāi)封第一講書(shū)人閱讀 37,917評(píng)論 0 268
  • 序言:老撾萬(wàn)榮一對(duì)情侶失蹤,失蹤者是張志新(化名)和其女友劉穎吻贿,沒(méi)想到半個(gè)月后串结,有當(dāng)?shù)厝嗽跇?shù)林里發(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 44,360評(píng)論 1 303
  • 正文 獨(dú)居荒郊野嶺守林人離奇死亡廓八,尸身上長(zhǎng)有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點(diǎn)故事閱讀 36,673評(píng)論 2 327
  • 正文 我和宋清朗相戀三年奉芦,在試婚紗的時(shí)候發(fā)現(xiàn)自己被綠了赵抢。 大學(xué)時(shí)的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片剧蹂。...
    茶點(diǎn)故事閱讀 38,814評(píng)論 1 341
  • 序言:一個(gè)原本活蹦亂跳的男人離奇死亡,死狀恐怖烦却,靈堂內(nèi)的尸體忽然破棺而出宠叼,到底是詐尸還是另有隱情,我是刑警寧澤其爵,帶...
    沈念sama閱讀 34,509評(píng)論 4 334
  • 正文 年R本政府宣布冒冬,位于F島的核電站,受9級(jí)特大地震影響摩渺,放射性物質(zhì)發(fā)生泄漏简烤。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點(diǎn)故事閱讀 40,156評(píng)論 3 317
  • 文/蒙蒙 一摇幻、第九天 我趴在偏房一處隱蔽的房頂上張望横侦。 院中可真熱鬧挥萌,春花似錦、人聲如沸枉侧。這莊子的主人今日做“春日...
    開(kāi)封第一講書(shū)人閱讀 30,882評(píng)論 0 21
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽(yáng)榨馁。三九已至憨栽,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間翼虫,已是汗流浹背屑柔。 一陣腳步聲響...
    開(kāi)封第一講書(shū)人閱讀 32,123評(píng)論 1 267
  • 我被黑心中介騙來(lái)泰國(guó)打工, 沒(méi)想到剛下飛機(jī)就差點(diǎn)兒被人妖公主榨干…… 1. 我叫王不留珍剑,地道東北人锯蛀。 一個(gè)月前我還...
    沈念sama閱讀 46,641評(píng)論 2 362
  • 正文 我出身青樓,卻偏偏與公主長(zhǎng)得像次慢,于是被迫代替她去往敵國(guó)和親旁涤。 傳聞我的和親對(duì)象是個(gè)殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點(diǎn)故事閱讀 43,728評(píng)論 2 351

推薦閱讀更多精彩內(nèi)容