controlnet是解决stable diffusion控形不准的核心插件，通过openpose控姿态、canny控边缘、depth控景深、tile+lineart多级组合及reference only局部控形五种方法实现精准形态约束。
☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜
如果您在使用 Stable Diffusion 生成图像时，发现人物姿态、构图结构或线条走向与预期严重偏离，则很可能是缺乏对画面形态的显式约束。ControlNet 正是为解决此类“控形不准”问题而设计的核心插件，它通过注入参考图的几何特征（如骨骼、边缘、深度）来强制生成结果服从指定形态。以下是实现精准控形的多种可行方法：
一、OpenPose 控制人体姿态
该方法利用人体关键点骨骼图作为控制信号，可精确复现参考图中人物的站立、抬手、叉腰等复杂姿势。其原理在于预处理器提取图像中18个关键关节点坐标，模型将这些空间关系编码为条件向量，全程引导 UNet 去噪过程保持姿态一致性。
1、打开 Stable Diffusion WebUI，进入文生图界面，向下滚动至 ControlNet 面板。
2、点击启用开关，勾选 Enable。
3、点击画板图标上传一张清晰展示目标姿态的人物照片，或使用 OpenPose 编辑器手动构建骨架图并导出 PNG。
4、在预处理器下拉菜单中选择 openpose，模型下拉菜单中选择 control_v11p_sd15_openpose。
5、将 Control Weight 设置为 1.0，Starting Step 设为 0，Ending Step 设为 1.0。
6、输入正向提示词，例如：a man in black suit, confident pose, studio lighting。
7、点击生成，输出图像中人物姿态将严格对齐参考图骨骼结构。
二、Canny 边缘控制线稿结构
此方法适用于需保留原始草图轮廓、建筑结构或物体外框的场景。Canny 预处理器通过双阈值梯度检测提取高对比度边缘，生成二值化线稿，再由对应模型将该拓扑结构嵌入扩散过程，确保生成图像不偏离原始构型。
1、准备一张含清晰轮廓的参考图（如手绘线稿、建筑速写或产品白模图）。
2、在 ControlNet 单元中启用开关，上传该图至图像输入区。
3、预处理器选择 canny，模型选择 control_v11p_sd15_canny。
4、勾选 Allow Preview，点击小火花图标确认预处理效果为干净、闭合的黑白线稿。
5、设置 Control Weight 为 1.2，以增强边缘约束强度。
6、提示词中避免出现“photorealistic”“blurry”等削弱结构感的词汇，改用“sharp line art”, “clean vector style”等强化轮廓表达。
7、执行生成，输出图像将严格沿用输入线稿的形状边界与部件连接关系。
三、Depth 景深控制画面构图与层次
该方法通过解析参考图的像素深度信息（近处亮、远处暗），重建三维空间布局，从而稳定控制主体前后位置、景别比例及透视关系。特别适合需保持“前景人物+中景街道+远景山脉”等分层结构的创作任务。
1、选取一张具有明显纵深感的照片（如人像街拍、室内透视图或风景照）作为参考。
2、启用 ControlNet 单元，在图像区域上传该图。
3、预处理器设为 depth_midas，模型设为 control_v11f1p_sd15_depth。
4、调整 Preprocessor Resolution 至与参考图一致（如 512×768），防止深度图失真。
5、将 Control Weight 设为 0.9，Starting Step 设为 0.2，保留初始扩散阶段的自由构图空间。
6、提示词中明确写出空间层级，例如：“a woman standing in foreground, cobblestone path receding to background, misty mountains far away”。
7、生成后，人物始终位于前景区域，路径宽度随距离自然收敛，远景元素按深度图灰度比例缩放排布。
四、Tile + Lineart 多级组合控形
当单一 ControlNet 无法同时满足姿态、轮廓与质感需求时，可启用多个 ControlNet 单元协同工作。Tile 模型负责维持整体画面分辨率与纹理细节，Lineart 模型则叠加精细线条控制，二者权重分配形成结构-细节双重锁定机制。
1、在 ControlNet 面板底部点击“Add new unit”，新增第二个单元，确保共启用两个独立 ControlNet 实例。
2、第一单元上传人物姿态图，预处理器设为 openpose，模型选 control_v11p_sd15_openpose，权重设为 0.8。
3、第二单元上传同一人物的高清线稿图，预处理器设为 lineart_standard，模型选 control_v11p_sd15_lineart，权重设为 0.6。
4、关闭两个单元的 Guess Mode，确保所有参数均被显式控制。
5、提示词中加入材质描述，例如：“detailed fabric texture, smooth skin shading, ink-drawing style outline”。
6、生成时系统将同步注入骨骼结构约束与笔触线条约束，最终输出既符合动作逻辑又具备清晰轮廓边界的图像。
五、Reference Only 模式辅助局部控形
该模式不依赖预处理器与模型文件，而是直接将参考图的 RGB 像素特征注入中间层，适用于仅需保持某一部分（如手势、面部朝向、道具摆放）形态不变的轻量级控形需求，无需额外下载模型。
1、在 ControlNet 面板中启用一个新单元，上传仅含待保留局部区域的裁剪图（如单独的手部特写）。
2、预处理器选择 none，模型选择 None。
3、勾选 Reference Only 开关，此时 ControlNet 将跳过特征提取，直接注入像素嵌入。
4、将 Control Weight 设为 0.4，避免过度压制全局风格表达。
5、在提示词中强调该局部对象，例如：“close-up of left hand making victory sign, fingers clearly visible, rest of body loosely rendered”。
6、生成结果中，指定局部区域（如胜利手势）将高度还原参考图形态，其余部分仍由主提示词主导生成。
