Stable Diffusion学习笔记TOP09
@@_插件篇之ControlNet功能篇
ControlNet控制网:一种用于控制稳定扩散模型的神经网络模型;它可以获取额外的输入图像通过不同的预处理器检测对应的数据并转换为控制图,从而作为SD扩散图像的额外条件,引导图像扩散过程。
备注:在实际使用的过程中,需要选择对应的模型;我们需要做的就是选择和预处理器具有相同起始关键词的模型。
ControlNet目前支持的15种预处理器,根据数据检测种类可分为两种类型:
1、功能型:拥有着不同的能力
2、构图型:控制着SD扩散图形的构图规则
第一类:功能型 第二类:构图型
IP2P/T2IA(自适应) 姿态 深度 法线
Reference风格参考 硬边缘线稿
tile分块/局部重绘 线稿软边缘
语义分割/随机洗牌 直线 涂鸦
和部分功能性模型