丰色 发自 凹非寺

量子位 | 公众号 QbitAI

Stable Diffusion软件，“AI绘画细节操作”ControlNet进入重磅升级：

只需使用文字提示词即可保持图像主体的特征随意更改图像细节的前提。

比如给美女从头发到衣服都是换身造型，神情更亲和:更亲和:

或者让模特从温柔的邻家小姐到高冷的御姐，身体和头部朝向、环境都换个花样：

——不管细节如何修改，原照的“生命”依然存在。

除了这种风格，它还可以正确控制动画类别:

来自推文的AI设计博主@sundyme说:

效果比想象的要好！

以上变化只需要一张参考图就可以完成，有些图片几乎可以完成订制大模型的效果了GA黄金甲体育。

以上变化只需要一张参考图就可以完成，有些图片几乎可以完成

订制大模型的效果了。

咳咳，人工智能绘画圈的朋友们，振作起来，又有趣了。（ps. 第一张和第三张效果图来自油管博主@Olivio Sarikas，第二个来自推特博主@sundyme）

以上内容的更新实际上是指一个名称

“reference-only”

预处理器。

它可以直接用参考图片引导蔓延，而不需要任何控制模型。

作者介绍说，隐私功能实际上类似于“inpaint但不会使图像崩溃。

(Inpaint是Stable Diffusion web 重绘UI的一部分可以重新制作不满意的区域，即被手工覆盖的区域。）

一些资深玩家可能知道trick是用inpaint传播图像的。

比如你有一张512x512狗的图像，然后想用同一只狗形成另一张512x512的图像。

此时，您可以将512x512的狗图像和512x512的空白图像传输到1024x512的图像中，然后通过inpaint将空白的512x512部分漫射出具有类似外观的狗的图像GA黄金甲。

在这个过程中，因为图像只是简单粗暴的拼接，也会失帧，所以效果一般不尽如人意。

拥有“reference-only“不一样：”

它可以使SD（即“Stable Diffusion”）

注意力层直接链接到任何单独的图像，方便SD立即输入此图像作为参考。

例如，官方示例图将一只静立的小狗改为跑步动作：

您只需将您的Controlnet升级为

1.1.153版本

然后点击“上面”reference-only提交狗的图片作为预处理器，键入提示词“键入提示词”“键入提示词”a dog running on grassland, best quality…”，SD只会用你的图片作为参考来进行更改。

“reference-only“功能一出来，很多网友就开始享受了。

“reference-only"功能一出来，就有不少网友开始享受。

传递一张包含人物姿态的动画图片，然后写一张看起来与原照完全无关的提示。突然，在原照的前提下，你想要的效果就跑出来了。它真的很强大，甚至达到了改变游戏规则的水平。

是时候捡起之前丢弃的废图再修复了。

自然，我觉得它不是那么极端和极端

以下是三位推特博主尝试的效果，主要是动画风格，一起欣赏：△来自@新宫ラリのAIイラストニュ△来自@br_d，左一为原照

台湾GA黄金甲平台

△来自@br_d，上一为原照



△来自@uoyuki667，左一为原照

有没有戳中你的心巴？

参考链接：

[1]https://github.com/Mikubill/sd-webui-controlnet/discussions/1236黄金甲体育官网

[2]https://twitter.com/sundyme/status/1657605321052012545[3]https://twitter.com/uoyuki667//status/1657748719155167233[4]https://twitter.com/br_d/status/1657926233068556289[5]https://twitter.com/aiilustnews/status/1657941855773003776— 完 —量子位 QbitAI · 头条号签订关注自己，第一次了解前沿技术动态