Aigc工程师 发表于 2024-7-23 15:18:13

第二二集:Revision预处理及模型详解

图文教程

Revision

Revision就是把图片转变成模型能理解的概念

简单可以理解就是Revision可以把图片作为提示信息

能够有效地捕捉到图像中的各种细节信息和特征,从而得到更加准确和细致的分割结果。

比如这张图片:

https://fszxai.fss-my.addlink.cn/webui/gj/0766.jpg

这张图,我们肉眼能读出来的信息有女孩,泳装,沙滩等等

如果用反推提示词也可以得到类似的提示词

但是revision不一样的是,它可以把我们主观或者反推软件忽略的元素也一并转换成模型可以理解的概念,比如3D渲染、真实拍摄等信息的转译会导致信息流失

这里我没有添加任何关键词由上图revision生成的图片

https://fszxai.fss-my.addlink.cn/webui/gj/0767.jpg

比如之前一直用的反推软件,往往不能完整概括图片里面所有的元素,而revision由于是图片直接转成embedding,跳过了图->字->embedding中间文字的转译,所以可以携带更多的信息

Revisio预处理器

revision_clipvision

它用于在进行版本修正时考虑到视觉效果的因素,以提高修正的准确性和视觉效果的质量

revision_ignore_prompt

它会忽略提示词,忽视提示词对其画面的影响和舒服,自我放飞式生成

注意第一次运行可能会报错,因为有个视觉模型需要去huggingface上下载,如果不能科学上网的或无法下载的,我把模型放到了网盘,大家自行下载后放到下面对应的文件夹

https://fszxai.fss-my.addlink.cn/webui/gj/0768.png

链接:

提取码:6ek5

Revisio使用注意事项

revision只需要预处理器,不需要模型

revision是SDXL新加的功能,更适合SDXL模型下使用

revision比较吃内存,内存比较小(<16G)的尽量不要尝试

revision可以进行图片融合,即2张以上图片进行融合
页: [1]
查看完整版本: 第二二集:Revision预处理及模型详解