ControlNet - Normal Map版本

ControlNet是一个神经网络结构，通过添加额外的条件来控制扩散模型。此检查点对应于在Normal Map估计上条件化的ControlNet。

它可以与 Stable Diffusion 结合使用。

模型详情

• 开发者：Lvmin Zhang, Maneesh Agrawala

• 模型类型：基于扩散的文本到图像生成模型

• 语言：英语

• 许可： The CreativeML OpenRAIL M license 是由负责可持续AI许可领域的 Open RAIL M license 的共同进行的工作的结果，适应了 BigScience 和 the RAIL Initiative 联合进行的工作。另请参阅我们许可证基于的 the article about the BLOOM Open RAIL license 。

• 了解更多信息的资源： GitHub Repository , Paper

• 引用为：

  @misc{zhang2023adding, title={Adding Conditional Control to Text-to-Image Diffusion Models}, author={Lvmin Zhang and Maneesh Agrawala}, year={2023}, eprint={2302.05543}, archivePrefix={arXiv}, primaryClass={cs.CV}}

介绍

Controlnet是由Lvmin Zhang、Maneesh Agrawala于 Adding Conditional Control to Text-to-Image Diffusion Models 提出的。

摘要如下：

我们提出了一种神经网络结构ControlNet，用于控制预训练的大规模扩散模型以支持额外的输入条件。ControlNet以端到端的方式学习任务特定的条件，即使在训练数据集很小（