Controlnet更新插件,新功能:颜色和样式
首先感谢
环球搬砖可因提供的原味视频:当时连字幕都没有,听的我头大。
教程中的正则化图片为无版权图片库Pixabay下载,文中仅供教学使用,非盈利商用。
——————————————————————————————————
一、安装部分Controlnet安装(如果您之前已经安装过了,该段可以跳过直接从二更新插件安装开始看):
-----------------------------------
sd-webui-controlnet安装基础教程:
1,插件安装:
webui启动后在扩展菜单栏目里,选择从网址安装:
https://jihulab.com/hunter0725/sd-webui-controlnet
安装完毕后,先关闭webui
之后开始sd-webui-controlnet模型的安装部分:
2,首先是annotator预处理模型:
访问:
https://huggingface.co/lllyasviel/ControlNet/tree/main/annotator/ckpts
在
stable-diffusion-webui(你的主程序文件夹)\extensions\sd-webui-controlnet\annotator\openpose
下放置
body_pose_model.pth
hand_pose_model.pth
在
stable-diffusion-webui(你的主程序文件夹)\extensions\sd-webui-controlnet\annotator\midas
下放置
dpt_hybrid-midas-501f0c75
然后是:
3,检测模型的安装
喜欢占地方大的(不推荐):https://huggingface.co/lllyasviel/ControlNet/tree/main/models
喜欢精简模型的:
https://huggingface.co/webui/ControlNet-modules-safetensors/tree/main
https://huggingface.co/TencentARC/T2I-Adapter/tree/main/models
下载后放在
stable-diffusion-webui(你的主程序文件夹)\extensions\sd-webui-controlnet\models
——————————————————————————————————
二、更新插件安装部分 :
1更新插件
更新你的sd-webui-controlnet到最新版本,秋叶启动器或者星空启动器,对插件进行更新
或者 【此处感谢 蓝莓的指导】
(先备份你下好的所有模型文件 记住,仅仅是模型)直接进入
stable-diffusion-webui(你的主程序文件夹)\extensions
在地址栏(如果你不懂什么叫地址栏请去搜搜百度。)
输入cmd
黑色屏幕中输入git clone https://jihulab.com/hunter0725/sd-webui-controlnet
2下载模型
在
https://huggingface.co/TencentARC/T2I-Adapter/tree/main/models
需要的新模型
t2iadapter_color_sd14v1.pth 实现颜色
t2iadapter_style_sd14v1.pth 实现风格
下载后放在
stable-diffusion-webui(你的主程序文件夹)\extensions\sd-webui-controlnet\models
初次启动style时会下载一个1.71g的文件,我也不清楚是什么可能是依赖支持。
——————————————————————————————————
三、使用及注意事项 :
1.用于上传到controlnet的正则化图片,请尽量保证1:1(而且可能需要是64的倍数)
2.t2iadapter_style_sd14v1 (风格渲染)

preprocessor下
选择:clip_vision
t2iadapter_style_sd14v1
右边的model选择t2iadapter_style_sd14v1
即可进行风格渲染
会使tag生成的的图片渲染成上传正则化图像的风格效果
渲染效果的强弱:
调整guidance start滑块(中间那个)
它影响的是渲染效果启动的时间。
简单的来说,在不调整右侧的end滑块情况下
guidance start滑块(中间那个)数值越小,对画面的影响幅度越大(启动越早)
2.t2iadapter_color_sd14v1 (颜色渲染)

preprocessor下
选择:color
右边的model选择t2iadapter_color_sd14v1
即可进行颜色渲染
会使tag生成的的图片渲染成上传正则化图像的颜色效果
对比效果:

风格化渲染的影响


颜色渲染效果:

0,2滑块开始渲染后的效果

0,5滑块开始渲染后的效果
——————————————————————————————————
四、 :图生图状态下的结果:

五、 :注意事项:
颜色渲染一样会影响画风
目前版本bug较多,有可能出现无效情况
环球搬砖可因的说法是可以一次产俩图试试来保证效果。