首页 > 其他分享 >Stable diffsuion基础篇(补充)

Stable diffsuion基础篇(补充)

时间:2024-07-08 23:55:34浏览次数:10  
标签:补充 lora 模型 生成 提示 参数 Stable diffsuion 可以

前言:

补充一些前面没有记录的知识点,比较琐碎但是又算是基础的一部分。

一、SDXL大模型

1.sdxl和sd1.5的区别

1.模型组合不同

sd1.5的生成模型是一个,

sdxl的生成模型是两个,可灵活结合出图

基础模型:base模型(负责潜空间放大)

精修模型:refiner模型(负责细化放大)

2.训练参数不同

1.1.5模型训练参数9.8亿,XL的base模型有35亿参数,refiner参数模型有65亿

2.1.5训练的图片分辨率主要是512*512,XL的训练图片是1024*1024

训练的参数和图像分辨率不一样,也就导致了XL分辨率更高,更多细节

3.提示词写法优化

1.sd1.5主要是短语提示词,句子提示词出图效果不好

2.sdXL可以用句子生成,不需要质量词,可以理解长文本,自然语言描写图画

2.出图方式

组合出图

1.首先选择base大模型

2.打开refiner,选择模型(生图比例占10-20%),切换时机0.8(30的迭代步数,24步开始用refiner生成)

当然,也可以选择不用refiner也是可以的

3.建议使用分辨率

官方模型按照这几个分辨率来出图,非官方模型可以看模型的参数借鉴

4.优劣势

优势:

1.相比1.5的初始分辨率大幅提高

2.生成图片更加准确

3.初步具备生成文字的能力

4.简化了提示词的编写

5.风格自由度大幅提高

劣势:

1.对电脑配置要求更高

2.旧版本lora无法继承

3.XL模型训练成本高

4.关键插件对XL的支持不完全

二、xyz脚本

xyz脚本的功能是:通过控制变量的方式,比较不同参数下图片的生成效果。

让我们可以更直观地比较不同参数设置下的生成结果。直接上图

标签:补充,lora,模型,生成,提示,参数,Stable,diffsuion,可以
From: https://blog.csdn.net/m0_56937682/article/details/140273389

相关文章

  • 如何用Stable Diffusion给人物换脸(免费插件学完就能用)
    哈喽大家好,AI今天给大家分享是的如果利用StableDiffusion给人物换脸!今天给大家推荐一款插件,不用训练loar也能给人物进行换脸!我们都知道日常换脸,需要的技术难度大,而且普通技术换脸的效果往往不够自然,尤其是在表情和面部细节的处理上。容易产生不真实感和违和感,光影融合度较......
  • Stable Diffusion 图生图之局部重绘
    StableDiffusion图生图(局部重绘):局部重绘:·在图生图界面中关于局部重绘有三个标签页.·这三个标签页主要是蒙版的使用方式不同.局部重绘标签.图片可以通过上传,或者是从文生图发送到局部重绘.右边是局部重绘的画笔工具.·局部重绘中,画布和画笔大小有快......
  • 如何用stable diffusion秒出彩平!几秒生成百来张图,包你满意
    -文末附相关素材文件-现在AI发展的也太迅速了,stablediffusion除了可以生成写实级效果图,现在也可以直接一键生成平面,还是特别写实的那种,简直不要太强大,比如上面这张平面,就是我用SD生成的,实在太强!下面我们来一步步教大家如何生成!01获取lora首先我们先安装部署好SD,如果你......
  • AI绘画最强SD(Stable Diffusion)玩法实操教学案例及商业变现项目分享
    AI绘画现在越来越火爆了,很多人无论大人小孩都在玩,还有的很多电商老板也在使用辅助生成产品主图和详情页,可以说是非常的实用。而其中最让人追捧和好评的就是SD(StableDiffusion)这款AI绘图软件了,StableDiffusion是一款基于深度学习的图像生成工具,它可以根据文本描述生成高质......
  • Stable Diffusion【艺术风格】:当游戏角色遇上古代纸莎草纸艺术
    提示词[character]asOnidemon参数设置大模型:RealVisXLV4.0Lightning采样器:DPM++SDEKarras采样迭代步数:5CFG:2反向提示词:(octanerender,render,drawing,anime,badphoto,badphotography:1.3),(worstquality,lowquality,blurry:1.2),(badteeth,deformedt......
  • 2024最火的AI绘画软件——Stable Diffusion整合包安装教程,奶奶看了都会!
    2024年绘画圈最火的软件,那妥妥的就StableDiffutionV4升级版无需安装,直接解压就能用(在此要感谢秋葉aaaki大佬的分享!)比之前版本的更加智能、高效和易操作。V4加强版小白也能轻易上手!「无套路!添加下方即可领取」1.软件背景信息▍StableDiffusion是什么?StableDif......
  • AI绘画 Stable Diffusion图像的脸部细节控制——采样器全解析
    大家好,我是画画的小强我们在运用AI绘画StableDiffusion这一功能强大的AI绘图工具时,我们往往会发现自己对提示词的使用还不够充分。在这种情形下,我们应当如何调整自己的策略,以便更加精确、全面地塑造出理想的人物形象呢?举例来说,假设我们输入的是:agirlindresswalks......
  • AI绘画Stable Diffusion:ControlNet组件—Scribble(涂鸦)赋予用户精细控制权,让涂鸦草图焕
    大家好,我是画画的小强今天给大家分享一下AI绘画StableDiffusion当中的:ControlNetScribble组件,**Scribble(涂鸦)**技术是一种能够为用户提供独特的手动注释或标记图像(如:涂鸦、简笔画等)的方法技术,可被用来引导SD图像生成过程。ControlNetScribble简介ControlNetScribble......
  • AI绘画Stable Diffusion【图生图教程】:图片高清修复的三种方案详解,你一定能用上!(附资料
    大家好,我是画画的小强今天给大家分享一下用AI绘画StableDiffusion进行高清修复(Hi-ResFix),这是用于提升图像分辨率和细节的技术。在生成图像时,初始的低分辨率图像会通过放大算法和细节增强技术被转换为高分辨率版本。这种方法能够显著提高图像的清晰度和视觉效果,特别适用......
  • Spark_06 SparkSQL补充知识点
    说明:本章主要分享Spark自定义函数的使用,catalyst以及sparksql与hive的联动自定义函数分类UDF:一对一关系,输出一行数据得到一行结果,可以自定义UDAF:聚合函数,多对一关系,输入多行数据经过函数以后输出一行计算结果,通常与groupBy联合使用UDTF:一对多的关系,输入一行数据经过函......