ControlNet插件需通过Extensions安装或Git克隆等方式部署,再下载对应.pth与.yaml模型文件放入models目录,最后在OpenPose模式下上传姿势图生成骨架线稿以约束生成姿态。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 多模态理解力帮你轻松跨越从0到1的创作门槛☜☜☜
一、ControlNet插件安装方法
如果您已部署Stable Diffusion WebUI,但界面底部未出现ControlNet控制面板,则说明插件尚未安装。以下是四种经验证有效的安装方式,任选其一即可完成部署。
1、点击WebUI顶部菜单栏的
Extensions → Available,等待插件列表加载完毕;
2、在页面中按下
Ctrl + F调出搜索框,输入sd-webui-controlnet;
3、找到对应插件后,点击右侧
Install按钮,安装完成后点击Apply and Restart UI;
4、重启WebUI后,在
txt2img或img2img界面底部即可看到ControlNet折叠面板。
1、进入
Extensions → Install from URL;
2、在输入框中粘贴官方仓库地址:
https://github.com/Mikubill/sd-webui-controlnet.git;
3、点击
Install,等待提示“Installed into extensions/sd-webui-controlnet”;
4、切换至
Installed标签页,勾选该插件,点击Apply and Restart UI。
1、访问GitHub仓库页面:
https://github.com/Mikubill/sd-webui-controlnet;
2、点击绿色按钮
Code → Download ZIP,解压后获得文件夹sd-webui-controlnet;
3、将该文件夹整体复制到路径:
stable-diffusion-webui/extensions/;
4、重启WebUI,检查ControlNet是否出现在界面底部。
1、打开命令行(CMD或PowerShell),进入
stable-diffusion-webui/extensions/目录;
2、执行命令:
git clone https://github.com/Mikubill/sd-webui-controlnet.git;
3、等待克隆完成,返回WebUI的
Installed标签页,勾选插件并点击Apply and Restart UI。
GitHub Copilot GitHub AI编程工具,实时编程建议下载
二、ControlNet模型下载与放置
仅安装插件无法启用功能,必须下载并正确放置ControlNet专用模型文件(.pth + .yaml组合)。模型决定可控制的图像特征类型,例如骨骼、边缘或深度。
1、打开HuggingFace ControlNet官方模型库:https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main;
2、下载至少两个基础模型:
control_v11p_sd15_openpose.pth与control_v11p_sd15_openpose.yaml;
3、确认文件完整:每个控制类型需同时存在同名.pth和.yaml文件;
4、将下载的文件放入目录:
stable-diffusion-webui/extensions/sd-webui-controlnet/models/;
5、重启WebUI,刷新后在ControlNet面板的Model下拉菜单中应可见control_v11p_sd15_openpose选项。
三、OpenPose骨架图生成与使用流程
OpenPose模式用于精准复现参考图中人物的姿态结构。它通过提取人体关键点生成骨架图(annotator result),作为SD生成过程的空间约束条件。
1、在ControlNet面板中勾选
Enable,并在Control Type下拉菜单中选择openpose;
2、点击画板图标上传一张清晰的人体姿势图(建议真人正面/侧身照,避免遮挡);
3、确保
Preprocessor为openpose、Model为control_v11p_sd15_openpose;
4、点击
Preview annotator result(星形图标),右侧将实时生成绿色骨架线稿;
5、若骨架识别有误(如手肘错位、缺失关节),可调整
Preprocessor Resolution至更高值(如1024)再预览;
6、在主提示词栏输入目标描述,例如:
a samurai in dynamic pose, red armor, misty mountain background;
7、设置
Weight为
1.0
,Starting Step为0,Ending Step为1;
8、点击
Generate,输出图像中人物姿态将严格对齐原始骨架图结构。
