本文介绍如何安装 ControlNet 扩展？和 ControlNet 的模型安装，同时给了两个例子。

一、ControlNet 扩展安装

进入 Stable Diffusion 界面，点击扩展标签，选择从 URL 安装，然后输入 ControlNet 网址（https://github.com/Mikubill/sd-webui-controlnet），粘贴到对应的地方，然后点击安装。

完成之后，点击已安装标签，将刚刚安装的扩展选项打钩，随后点应用并重启UI按钮。

重启UI之后，text2img和img2img标签界面下方就会多出一个ControlNet选项。

二、ControlNet 模型下载安装

已经安装了 sd-webui-controlnet 扩展后，您可以从 ControlNet 的 HuggingFace 页面上下载所需的文件（https://huggingface.co/lllyasviel/ControlNet-v1-1/tree/main）。

ControlNet 模型文件的命名规范如下：

下载好我们需要的 ControlNet 模型文件后，下面是安装步骤：

• 从 ControlNet 的 HuggingFace 页面上下载所需的文件。对于Pose模型，您只需要下载以下文件：models/control_sd15_openpose.pth。
• 将下载的文件放入 stable-diffusion-webui\extensions\sd-webui-controlnet\models 目录中。 注意目录，不是 stable diffusion 模型的目录。
• 重新启动 Stable Diffusion Webui 即可。注意，必须重启。

三、案例：骨骼姿势识别

姿势识别，用于人物动作，提取人体姿势的骨架特征（posture skeleton）。

姿势提取的效果图很像小时候 flash 上的小游戏“火柴人打斗”，有了这个就不用去网上寻找各种英语姿势tag，而是可以直接输入一张姿势图。下面是相关步骤：

1. 随便网上找一张相对少见点的姿势，然后稍微裁剪一下，让人物更大一点。
2. 把图片放进 ControlNet，Enable 打开，预处理器选择 openpose。
3. 然后点击 Preview annotator result 按钮（星星按钮），生成预处理预览图。

4. 看预览的骨架图，识别还算精确。（找的图最好是真人，识别会准一点）。
5. Prompt提示词就写“girl”（女孩），然后点击generate生成按钮。

girl

Steps: 20, Sampler: Euler a, CFG scale: 7, Seed: 1529353483, Size: 512x512, Model hash: 4199bcdd14, Model: revAnimated_v122, Version: v1.2.1, ControlNet: "preprocessor: openpose, model: control_v11p_sd15_openpose [cab727d4], weight: 1, starting/ending: (0, 1), resize mode: Crop and Resize, pixel perfect: False, control mode: Balanced, preprocessor params: (512, 64, 64)"其中使用的骨骼姿势：

四、案例：脸部表情

这里将用到 ControlNet 的新模型， 下载安装方法看第二部分。

需要下载的模型在：
https://huggingface.co/CrucibleAI/ControlNetMediaPipeFace/blob/main/control_v2p_sd15_mediapipe_face.safetensors 同时要下载或配置 yaml文件

• 对于 1.5 模型，您可以在设置中保留默认的 YAML 配置（尽管您也可以下载 control_mediapipe_face_sd15_v2.yaml 并将其放在模型旁边）。
• 对于 2.1 模型，您需要下载 control_mediapipe_face_sd21_v2.yaml

下载后，将其放在与模型相同的文件夹中。 在任何一种情况下，您都不需要更改 Controlnet 设置中的默认配置。

使用，注意，我们这里预处理用的是 mediapipe_face

用这个脸部表情，我们可以轻松的生成同样的。

gril
Steps: 20, Sampler: DPM++ 2M Karras, CFG scale: 7, Seed: 556367320, Size: 512x512, Model hash: 4199bcdd14, Model: revAnimated_v122, Version: v1.2.1, ControlNet: "preprocessor: mediapipe_face, model: control_v2p_sd15_mediapipe_face [9c7784a9], weight: 1, starting/ending: (0, 1), resize mode: Crop and Resize, pixel perfect: False, control mode: Balanced, preprocessor params: (512, 1, 0.5)"

总结

ControlNet 给 Stable Diffusion 添加了额外控制能力，来引导 Stable Diffusion 按照创作者的创作思路生成图像，从而提升 AI 图像生成的可控性和精度， 要想精准生成类似的， 它是必不可少的。