一、介绍
本篇来介绍下图生图的流程,图生图只是在文生图基础上做了一点点的改动,再结合原理查看,你会发现和文生图类似。
二、流程步骤
回顾一下上一篇的文生图的完整流程
采样器通过模型形成一个Latent space
我们输入的参数有text prompt,通过clip编码器,是由模型提供的,变成token输入给采样器
然后用一个空的Latent图片,直接给采样器,作为基础的采样
采样器经过多次的工作,也就是对应步数那个属性,这里设置的是20步,也就是执行了20次
然后生成了Latent的结果,Latent结果经过解码,就变成了我们需要的图片了
图生图的话很简单,只要把空Latent变成我们具体要参考的图片即可,把图片当作第一次的采样参考。
这里我们修改下文生图的流程
在空白地方按下面顺序生成一下加载图像这个节点
具体图片的话,看原理流程图里面是需要先经过VAE编码后才可以接入到采样器的,所以这里把加载器的图像节点拉出来,连接一个VAE编码节点,这时候才可以去连接采样器的输入端的Latent,其实大家后面连接节点的时候可以注意节点的颜色,相同颜色的节点才可以连接。最后也要记得把VAE节点和大模型的去链接上才行。不管是CLIP编码器还是VAE编码器都是大模型提供的,所以都需要连接上。
这时候的采样器里面的降噪就是重绘幅度了,范围0-1,越大越不像原图,越小越像。这里我们用0.5测试一下
最终的流程就是这样,不同颜色也对应的不同的对应关系,记得保存哦~
再来对照一下工作原理,到此,相信大家基础入门算是打牢固了。
三、修改尺寸
上面的只是一个最基本的工作流,你会发现图片尺寸好像无法修改,只能使用图片默认的。
这时候想要修改图片尺寸,需要修改到工作流
加载图像这里拖出来,选择按如下这样,找到图像放大,通常用的就是图像缩放和图像按系统缩放。
如下图这样,按图像缩放的可以设置具体的宽高,也是最常用的,第二种就是直接设置缩放倍数。
后面常见的缩放进阶篇会具体介绍,目前大家主要知道这里可以调整尺寸大小即可。
标签:Latent,缩放,流程,图生,采样器,VAE,图像,解析,节点 From: https://blog.csdn.net/solblog/article/details/140330519