AI繪畫(huà) 新多功能controlnet插件,草圖上色,動(dòng)作骨架提取 等功能,安裝及下載教程
個(gè)人經(jīng)驗(yàn),很菜不懂電腦,只做最基本使用的介紹
(資料圖片)
webui要比較新版的,大概2月份以后,推薦?秋葉aaaki 的啟動(dòng)器來(lái)更新
1.安裝
https://github.com/Mikubill/sd-webui-controlnet 先是這個(gè)網(wǎng)站,(打開(kāi)webui)把它
如上圖,作者給出了下載方法。
如果沒(méi)弄清楚,就是說(shuō)打開(kāi)webui,把這個(gè)網(wǎng)址復(fù)制到 擴(kuò)展欄的install from URL 的第一行,點(diǎn)install即可
如果沒(méi)梯子或者莫名其妙的原因安裝失?。ㄎ揖褪?/p>
就在這里
解壓,將文件夾放在這個(gè)位置
然后重新加載或重新啟動(dòng)webui
2.下載模型
https://huggingface.co/toyxyz/Control_any3
模型注釋(機(jī)翻,大致上介紹功能):?
ControlNet/models/control_sd15_canny.pth
ControlNet+SD1.5 模型,用于使用精明邊緣檢測(cè)來(lái)控制 SD。
ControlNet/models/control_sd15_depth.pth
ControlNet+SD1.5模型使用Midas深度估計(jì)來(lái)控制SD。
ControlNet/models/control_sd15_hed.pth
ControlNet+SD1.5 型號(hào)使用 HED 邊緣檢測(cè)(軟邊緣)控制 SD。
ControlNet/models/control_sd15_mlsd.pth
ControlNet+SD1.5模型使用M-LSD線檢測(cè)來(lái)控制SD(也可以與傳統(tǒng)的Hough變換一起使用)。
ControlNet/models/control_sd15_normal.pth
ControlNet+SD1.5 模型使用法線貼圖控制 SD。最好使用該 Gradio 應(yīng)用程序生成的法線貼圖。只要方向正確,其他法線貼圖也可以工作(左邊看紅色,右邊看藍(lán)色,上看綠色,下看紫色)。
ControlNet/models/control_sd15_openpose.pth
ControlNet+SD1.5 模型,使用 OpenPose 姿勢(shì)檢測(cè)控制 SD。直接操縱姿勢(shì)骨架也應(yīng)該有效。
ControlNet/models/control_sd15_scribble.pth
ControlNet+SD1.5模型使用人類涂鴉控制SD。該模型使用邊界邊緣進(jìn)行訓(xùn)練,具有非常強(qiáng)大的數(shù)據(jù)增強(qiáng)功能,以模擬類似于人類繪制的邊界線。
ControlNet/models/control_sd15_seg.pth
ControlNet+SD1.5模型使用語(yǔ)義分割來(lái)控制SD。協(xié)議是ADE20k。
選擇要使用的模型下好,目前來(lái)最實(shí)用的大概為
ControlNet/models/control_sd15_openpose.pth 動(dòng)作提取(注意真人圖片能更有效),也可以自己畫(huà)線條,可以很方便的定制動(dòng)作
以及ControlNet/models/control_sd15_canny.pth 線稿上色
將下好的模型放置于此處
3.使用
打開(kāi)webui
打開(kāi)這里,沒(méi)有的話就是沒(méi)下好?
出現(xiàn)這個(gè)界面
大致調(diào)用紅圈幾項(xiàng)即可使用
這是機(jī)翻版本的界面
注意,如果出現(xiàn)模型無(wú)法讀取,不生效情況,一般是webui版本跟不上,它讀不出來(lái),請(qǐng)更新webui
出圖這部分照常使用,輸入你想要的東西
如果出現(xiàn)出圖的時(shí)候卡了半天的情況,可能是版本對(duì)不上,在下載什么東西,下好了就行了
完成,下面兩張是動(dòng)作提取的效果
大致就是這樣