Stability AI 发布了 ControlNet Lora 将 ControlNet 模型缩小到 700M

Stabilty AI 发布了 ControlNet Lora，通过将低秩参数有效调整添加到ControlNet中，这种方法提供了一种更有效、更紧凑的方法，可以将模型控制扩展到更多消费级GPU。将原始4.77G的 ControlNet 模型缩小到了 738M，这次他们发布了四个ControlNet Lora模型。这次的模型会先在ComfyUI 和 StableSwarmUI 中提供。四种模型包括：

MiDaS and ClipDrop Depth：深度估计是一种图像处理技术，可确定场景中物体的距离，提供突出显示接近度变化的深度图。

Canny Edge：Canny 边缘检测是一种图像处理技术，可识别强度的突然变化以突出显示图像中的边缘。

Photograph and Sketch Colorizer：这两个 Control-LoRA 可用于对图像进行着色。Recolor 旨在为黑白照片着色，Sketch 旨在为作为黑底白字图像输入的绘图着色。

Revision是这次完全新增的一个模型，它使用池化 CLIP 嵌入来生成概念上与输入相似的图像。它可以额外使用，也可以代替文本提示。