首页 > 其他分享 >图生图流程解析

图生图流程解析

时间:2024-07-11 12:31:29浏览次数:16  
标签:Latent 缩放 流程 图生 采样器 VAE 图像 解析 节点

一、介绍

本篇来介绍下图生图的流程,图生图只是在文生图基础上做了一点点的改动,再结合原理查看,你会发现和文生图类似。

二、流程步骤

回顾一下上一篇的文生图的完整流程

采样器通过模型形成一个Latent space

我们输入的参数有text prompt,通过clip编码器,是由模型提供的,变成token输入给采样器

然后用一个空的Latent图片,直接给采样器,作为基础的采样

采样器经过多次的工作,也就是对应步数那个属性,这里设置的是20步,也就是执行了20次

然后生成了Latent的结果,Latent结果经过解码,就变成了我们需要的图片了

图生图的话很简单,只要把空Latent变成我们具体要参考的图片即可,把图片当作第一次的采样参考。

这里我们修改下文生图的流程

在空白地方按下面顺序生成一下加载图像这个节点

具体图片的话,看原理流程图里面是需要先经过VAE编码后才可以接入到采样器的,所以这里把加载器的图像节点拉出来,连接一个VAE编码节点,这时候才可以去连接采样器的输入端的Latent,其实大家后面连接节点的时候可以注意节点的颜色,相同颜色的节点才可以连接。最后也要记得把VAE节点和大模型的去链接上才行。不管是CLIP编码器还是VAE编码器都是大模型提供的,所以都需要连接上。

这时候的采样器里面的降噪就是重绘幅度了,范围0-1,越大越不像原图,越小越像。这里我们用0.5测试一下

最终的流程就是这样,不同颜色也对应的不同的对应关系,记得保存哦~

再来对照一下工作原理,到此,相信大家基础入门算是打牢固了。

三、修改尺寸

上面的只是一个最基本的工作流,你会发现图片尺寸好像无法修改,只能使用图片默认的。

这时候想要修改图片尺寸,需要修改到工作流

加载图像这里拖出来,选择按如下这样,找到图像放大,通常用的就是图像缩放和图像按系统缩放。

如下图这样,按图像缩放的可以设置具体的宽高,也是最常用的,第二种就是直接设置缩放倍数。

后面常见的缩放进阶篇会具体介绍,目前大家主要知道这里可以调整尺寸大小即可。

标签:Latent,缩放,流程,图生,采样器,VAE,图像,解析,节点
From: https://blog.csdn.net/solblog/article/details/140330519

相关文章

  • PlugLink的技术架构实例解析(附源码)
    在探讨PlugLink这一开源应用的实际应用与技术细节时,我们可以从其构建的几个核心方面入手,结合当前AI编程的发展趋势,为您提供既有实例又有深度解析的内容。PlugLink的技术架构实例解析前端技术选型——layui框架:PlugLink选择了轻量级且功能丰富的layui作为前端框架,它提......
  • 「AI绘画Stable Diffusion 零基础入门 」AI 绘画原理与工具介绍,万字解析AI绘画的使用
    大家好,我是程序员晓晓AI绘画原理想要入门AI绘画,首先需要了解它的原理是什么样的。其实很早就已经有人基于深度学习模型展开了对图像生成的研究了,但在那时,生成的图像分辨率和内容都非常抽象。直到近两年,AI产出的图像内容的质量变高、而且有一定的艺术价值,这时它才算......
  • 首席数据官CDO证书报考指南:方式、流程、适考人群与考试难度
    在信息泛滥的今天,数据已转变为企业不可或缺的宝贵资源。面对海量的信息,如何提炼出价值,为企业带来实质性的收益?首席数据官(CDO)认证的出现正是为了满足这一需求,它不仅是个人专业能力的体现,也是引领企业迈向数据化未来的关键。首席数据官的角色和重要性作为企业中的核心人物,首席......
  • TCP协议三次握手和四次挥手原理图文解析
    前言TCP协议(TransmissionControlProtocol)是计算机网络中最常用的传输层协议之一,负责提供可靠、面向连接的数据传输服务。它存在的目的就是为了让传输更可靠,也更稳定,但同样也会对端口与端口之间的传输速率造成影响。它一般采用两种方式来使传输更加可靠。一种是面向连接,而另......
  • 工程安全监测中的振弦采集仪技术解析与应用
    工程安全监测中的振弦采集仪技术解析与应用河北稳控科技振弦采集仪是一种在工程安全监测中广泛使用的仪器,用于测量和监测结构的振动和应变。它通过采集结构中的振弦信号,可以提供详细的结构运行状态和变化情况,为工程安全监测提供有效的数据支持。 振弦采集仪的原理是基于振弦......
  • AquaCrop模型农业水资源管理及代码解析技术教程
    原文链接:AquaCrop模型农业水资源管理及代码解析技术教程https://mp.weixin.qq.com/s?__biz=MzUzNTczMDMxMg==&mid=2247608744&idx=5&sn=5b642a0f5a95138ae63b3edb9ec9a4b4&chksm=fa82684fcdf5e1596252586aa2f000fce2dc113b8a19ba88d4dd28f526071652918e32218f7e&token=55005666......
  • Mysql中存储过程、存储函数、自定义函数、变量、流程控制语句、光标/游标、定义条件和
    场景存储过程存储过程是一组为了完成特定功能的SQL语句集合。使用存储过程的目的是将常用或复杂的工作预先用SQL语句写好并用一个指定名称存储起来,这个过程经编译和优化后存储在数据库服务器中,因此称为存储过程。当以后需要数据库提供与己定义好的存储过程的功能相同的服务时,......
  • 【Python】Python中TODO的用法解析
    目录一.Python中的TODO是什么二.Python中什么时候使用TODO三.Pycharm中关于TODO的使用方式一.Python中的TODO是什么在Python中, TODO 通常不是一个语言内置的关键字或功能,而是被用作一种注释约定,来标记代码中需要进一步实现或改进的部分。开发者会在代码中使用 TODO......
  • 大模型备案全网最详细流程【附附件】
    本文要点:大模型备案最详细说明,大模型备案条件有哪些,《算法安全自评估报告》模板,大模型算法备案,大模型上线备案,生成式人工智能(大语言模型)安全评估要点,网信办大模型备案。大模型备案安全评估流程详细说明,见下图:大模型安全评估流程图算法备案安全评估流程详细说明,见下图:算......
  • 微信小程序 - 选项卡切换 - 视频播放 - (图解+代码流程)
    目录一、选项卡切换效果图1.选项卡切换.wxml代码2.选项卡切换.wxss代码3.选项卡切换.js代码neirclik函数onLoad函数ctqis函数二、视频播放效果图1.视频播放.wxml代码视频组件1.视频播放.wxss代码3.视频播放.js代码**随机颜色生成函数getRandomColor()****页......