跳转到主内容
趣航编程网 - 趣学编程,启航技术之路!

Stable Diffusion ControlNet怎么用 ControlNet插件安装及骨架图使用【进阶】

ControlNet插件需通过Extensions安装或Git克隆等方式部署,再下载对应.pth与.yaml模型文件放入models目录,最后在OpenPose模式下上传姿势图生成骨架线稿以约束生成姿态。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜

一、ControlNet插件安装方法

如果您已部署Stable Diffusion WebUI,但界面底部未出现ControlNet控制面板,则说明插件尚未安装。以下是四种经验证有效的安装方式,任选其一即可完成部署。

1、点击WebUI顶部菜单栏的

Extensions → Available,等待插件列表加载完毕;

2、在页面中按下

Ctrl + F调出搜索框,输入sd-webui-controlnet;

3、找到对应插件后,点击右侧

Install按钮,安装完成后点击Apply and Restart UI;

4、重启WebUI后,在

txt2img或img2img界面底部即可看到ControlNet折叠面板。

1、进入

Extensions → Install from URL;

2、在输入框中粘贴官方仓库地址:

https://github.com/Mikubill/sd-webui-controlnet.git;

3、点击

Install,等待提示“Installed into extensions/sd-webui-controlnet”;

4、切换至

Installed标签页,勾选该插件,点击Apply and Restart UI。

1、访问GitHub仓库页面:

https://github.com/Mikubill/sd-webui-controlnet;

2、点击绿色按钮

Code → Download ZIP,解压后获得文件夹sd-webui-controlnet;

3、将该文件夹整体复制到路径:

stable-diffusion-webui/extensions/;

4、重启WebUI,检查ControlNet是否出现在界面底部。

1、打开命令行(CMD或PowerShell),进入

stable-diffusion-webui/extensions/目录;

2、执行命令:

git clone https://github.com/Mikubill/sd-webui-controlnet.git;

3、等待克隆完成,返回WebUI的

Installed标签页,勾选插件并点击Apply and Restart UI。

GitHub Copilot GitHub AI编程工具,实时编程建议下载

二、ControlNet模型下载与放置

仅安装插件无法启用功能,必须下载并正确放置ControlNet专用模型文件(.pth + .yaml组合)。模型决定可控制的图像特征类型,例如骨骼、边缘或深度。

1、打开HuggingFace ControlNet官方模型库:https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main;

2、下载至少两个基础模型:

control_v11p_sd15_openpose.pth与control_v11p_sd15_openpose.yaml;

3、确认文件完整:每个控制类型需同时存在同名.pth和.yaml文件;

4、将下载的文件放入目录:

stable-diffusion-webui/extensions/sd-webui-controlnet/models/;

5、重启WebUI,刷新后在ControlNet面板的Model下拉菜单中应可见control_v11p_sd15_openpose选项。

三、OpenPose骨架图生成与使用流程

OpenPose模式用于精准复现参考图中人物的姿态结构。它通过提取人体关键点生成骨架图(annotator result),作为SD生成过程的空间约束条件。

1、在ControlNet面板中勾选

Enable,并在Control Type下拉菜单中选择openpose;

2、点击画板图标上传一张清晰的人体姿势图(建议真人正面/侧身照,避免遮挡);

3、确保

Preprocessor为openpose、Model为control_v11p_sd15_openpose;

4、点击

Preview annotator result(星形图标),右侧将实时生成绿色骨架线稿;

5、若骨架识别有误(如手肘错位、缺失关节),可调整

Preprocessor Resolution至更高值(如1024)再预览;

6、在主提示词栏输入目标描述,例如:

a samurai in dynamic pose, red armor, misty mountain background;

7、设置

Weight为

1.0

,Starting Step为0,Ending Step为1;

8、点击

Generate,输出图像中人物姿态将严格对齐原始骨架图结构。

相关文章