|
|
微信扫码快速注册，学习AIGC更多知识
您需要 登录 才可以下载或查看，没有账号？立即注册
x
图文教程
Reference（参考）模型是一种预处理器，可以根据导入的素材图片
参考图片的配色、色调、画风、画中的事物
创建出新图片，使画中事物仍然和原图的相似性
这个模型在涂鸦或线稿生成等场景中应用较广
能产生与参考图风格类似但细节不同、元素多样的图片
Reference模型
无，Reference（参考）是一种预处理器
Reference预处理器
Reference一共提供三种预处理器：
reference_adain
reference_adain+attn
reference_only
1.reference_adain预处理器
（官方文档无相关具体介绍）
它可能用于在进行参考图像处理时，利用 AdaIN (Adaptive Instance Normalization) 机制，实现风格迁移网络(Style Transfer)等类似任务。
AdaIN 是一种用于图像样式迁移的方法，它通过将内容图像的条件概率分布与样式图像的边缘概率分布相匹配，实现将样式图像的风格应用于内容图像
这种机制可以帮助模型更好地实现图像样式的迁移和转换
在具体使用过程中发现该预处理器保持原画面的相似性较差
它能够使生成的图像更接近模型，对颜色和脸型的改变特别明显，更侧重于任何二次元风格
2.reference_adain+attn预处理器
Reference_adain+attn预处理器是reference_adain一种高级的预处理器
用于在基于图像的生成模型（如DALL-E等）中实现精细的图像控制
它通过将输入图像的参考部分进行高级特征转换，来生成具有参考特征的新图像
这种预处理器能帮助模型在风格迁移、跨域生成等任务中取得更好的效果
在具体使用过程中发现该预处理器保持原画面的相似性最好
它通过将输入图像的参考部分进行高级特征转换，来生成具有参考特征的新图像
这种预处理器能帮助模型在风格迁移、跨域生成等任务中取得更好的效果
3.reference_only预处理器
Reference_only预处理器是一个功能
允许用户在给定参考图像的情况下生成新的图像
这个预处理器主要应用于根据图生图的场景，基本上保留原图的风格
具体使用过程中发现这个预处理器主要应用于根据图生图的场景，基本上保留原图的风格
但只有一张图或者图很少的情况
这个方法对于懒于进行复杂操作或没有时间进行大量训练的用户来说是很有用的
Reference特色参数
Style Fidelity (only for "Balanced" mode)
风格保真度，值越大生成的图片风格和参考图的差异就越小，反之亦然
Reference出图更依赖于大模型，对于一些大模型，Style Fidelity值太大，会导致崩图
所以我们出图需要更接近参考图的时，可以设置0.5-0.9之间
如果需要更多风格的改变，Style Fidelity值调整为0.5以下
实例教程：让狗动起来
让坐着的小狗跑起来
1.controlnet设置
上传参考图像
启用、完美像素模式、允许预览打勾
控制类型：Reference(参考)
预处理器：Reference_adain+attn预处理器
模型：没有选项，无
Style Fidelity：0.5
ControlNet设置好后点击右边爆炸按键
2.SD基本设置
大模型选择
然后在提示词里面输入：一只狗在草地上快乐地奔跑
正向提示词：masterpiece,best quality,official art,extremely detailed,8k wallpaper,a dog was running happily on the grass,
反向提示词：lowres,error,cropped,worst quality,low quality,jpeg artifacts,out of frame,watermark,signature,blurry,
另外，在绘制SD基本参数时，不能勾选“高分辨率修复”，否则ControlNet的Reference处理将会失效
所有参数都设置好后就可以生成了
作业题
用Reference(参考)改变人物表情
先用SD生成一个微笑的美女图，然后再通过Reference(参考)将微笑的美女图改为哭泣
要求尽量减少原图的其他元素变化 |
|
登录
立即注册
