Controlnet - v1.1 - 软边版本

Controlnet v1.1是 Controlnet v1.0 的后续型号，由 Lvmin Zhang 在 lllyasviel/ControlNet-v1-1 发布。

此检查点将 the original checkpoint 转换为扩散器格式。它可以与稳定扩散等条件一起使用，例如 runwayml/stable-diffusion-v1-5 。

更多详情，请参阅 ? Diffusers docs 。

ControlNet是一种神经网络结构，用于通过添加额外条件来控制扩散模型。

此检查点对应于在软边上进行条件控制的ControlNet。

模型详情

• 开发者：张律敏，Maneesh Agrawala

• 模型类型：基于扩散的文本到图像生成模型

• 语言：英语

• 许可证： The CreativeML OpenRAIL M license 是 Open RAIL M license 的改编版，是 BigScience 和 the RAIL Initiative 在负责任的AI许可领域共同进行的工作的一部分。请参阅我们的许可证所基于的 the article about the BLOOM Open RAIL license 。

• 更多信息资源： GitHub Repository ， Paper 。

• 引用为：

  @misc{zhang2023adding, title={Adding Conditional Control to Text-to-Image Diffusion Models}, author={Lvmin Zhang and Maneesh Agrawala}, year={2023}, eprint={2302.05543}, archivePrefix={arXiv}, primaryClass={cs.CV}}

介绍

Controlnet是由张律敏，Maneesh Agrawala于 Adding Conditional Control to Text-to-Image Diffusion Models 提出的。

摘要如下：

我们提出了一种神经网络结构ControlNet，用于控制预训练大型扩散模型以支持附加输入条件。ControlNet以端到端的方式学习特定于任务的条件，即使训练数据集很小（