首页 > 其他分享 >醒醒吧!你们的Stable Diffusion都用错了!【table Diffusion必装插件使用攻略】让你的AI绘画技术提升200%

醒醒吧!你们的Stable Diffusion都用错了!【table Diffusion必装插件使用攻略】让你的AI绘画技术提升200%

时间:2024-06-15 11:32:38浏览次数:22  
标签:Diffusion 插件 必装 模型 提示 webui SD

哈喽,大家好,我是AI极客菌,

今天给大家分享一下Stable Diffusion的插件使用攻略。

一、什么是插件

Stable Diffusion的插件主要是用来丰富SD的一些功能,例如C站助手,提示词助手,图片信息助手等插件都是为了增强SD的实用性。

二、安装插件

我们以C站助手为例,C站助手可以将从C站(civitai.com)下载的Lora模型和大模型自动加载封面图和触发词等,此外还可以添加模型的访问地址,如下图就是我们安装好的C站助手。

下面我们开始告诉大家安装插件的3种方法。

1、通过网址安装

点击WebUI菜单栏里的扩展(Extentions),选择从网址安装标签,复制粘贴下面的这个网址,点击安装即可。

https://github.com/butaixianran/Stable-Diffusion-Webui-Civitai-Helper

2、通过扩展列表安装

此外你也可以从“可下载”标签卡里查找自己需要的插件,然后点击“安装”即可。


3、网上下载存放到指定目录

此外你还可以直接将下载并解压好的插件安装包,放在SD的extensions目录下面,如下图:

如果你使用的秋叶大佬的整合包,那么这些插件默认都是提前给你安装好的。

三、插件功能介绍

1、a1111-sd-webui-tagcomplete

这是文生图里面常用的一个提示词插件,其主要功能就是能够根据你输入的内容,自动联想词汇供你选择,如下图:

当我们输入:ma 两个字符,下面立马自动给你提供了备选单词。

此外还支持中文提示,当我们输入:女孩,下面也会自动提供与女孩相关的备选词汇。

2、adetailer

这款插件主要是用来修复人脸崩坏的情况,此外还可以优化人的手部和全身,是一款修图插件。

我们可以看一下使用前后的图片效果:

在这里插入图片描述

使用步骤

①、我们在SD的界面上找到ADetailer这个插件,点击“启用After Detailer”就可以使用它了。

②、选择我们需要使用的模型

每个模型适用场景有所不同,具体如下:

模型
适用对象
face_yolov8n.pt
2D / 真实人脸
face_yolov8s.pt
2D / 真实人脸
hand_yolov8n.pt
2D / 真实人手
person_yolov8n-seg.pt
2D / 真实全身
person_yolov8s-seg.pt
2D/真实全身
mediapipe_face_full
真实人脸
mediapipe_face_short
真实人脸
mediapipe_face_mesh
真实人脸
mediapipe_face_mesh_eyes_only
真实人眼

3、multidiffusion-upscaler-for-automatic1111

这是一款防止爆显存的插件,低显存电脑必备插件。

插件可以大幅减少SD运算的时候所需显存,相当于是连续画多张图,再合并起来。

这种拆分任务的方式可以让显存较小的电脑也能够画出更大分辨率的图。

我们在SD的界面上找到Tiled Diffusion和Tiled VAE这两个功能,点击“启用Tiled Diffusion”和“启用Tiled VAE”就可以使用它了。


4、sd-dynamic-thresholding

支持使用更高的 CFG 比例而不会出现颜色和画面崩坏问题。

我们知道CFG是用来控制提示词相关性的,这个值越高,相关性也就越高,但是太高的CFG值会导致画面崩坏,这个插件就是来解决这个问题的。

①、我们将CFG值调到最大的30,这个时候提示词与画面的相关性是最高的

②、找到SD中的Dynamic Thresholding插件,勾选启用即可。

5、sd-webui-controlnet

ControlNet是一种神经网络结构,通过添加额外条件来控制扩散模型,用于增强扩散模型,安装了ControlNet,可以解锁SD的更多玩法。

①、我们找到SD界面上的ControlNet插件,点卡就可以看到整个插件页面,功能非常多。

②、点击“启用”就可以开始使用ControlNet对图片进行各种控制了,包括我们常见的人物姿势控制,换脸,光影文字等都可以从这里控制。

6、sd-webui-infinite-image-browsing

这个是方便大家检索自己生成的各种图片,里面提供了各种图片搜索功能

7、sd-webui-lora-block-weight

LoRA是有很多层的,这个插件通过控制不同分层的权重能调整LoRA的部分风格,比如脸型,服饰,背景等,

属于比较高级的功能,通常炼丹(训练Lora)的人会比较关注这个插件,普通人知道有这个插件就好。

8、sd-webui-model-converter

这个是用来转换大模型精度使用的,一般训练大模型的人会用到,网上常说的剪枝版大模型,通常会用到这个功能,普通用户一般使用不到。

9、sd-webui-openpose-editor

这个是ControlNet里的人体动作姿控制插件,允许你调整人物的动作,来生成你想要的图片,需要先安装openpose相关模型才能使用。

10、sd-webui-prompt-all-in-one

这也是一个提示词插件,让写提示词更加容易。它能提高正向提示词/反向提示词输入框的使用体验。

它拥有更直观、强大的输入界面功能,它提供了自动翻译、历史记录和收藏等功能,它支持多种语言,满足不同用户的需求。

点击一键翻译即可将所有中文翻译成英文,即使不在提示词库里的也可以翻译。

自动翻译,弥补自动补全插件无法识别的劣势。

11、sd-webui-segment-anything

分割一切插件正如其名称一样,主要是用来对图片进行切割成固定的块,方便用户进行重绘被切割的块。主要是为了方便用户进行修图使用。

同样该插件需要下载模型才能正常使用。

12、sd-webui-supermerger

这个插件正如其名:超级融合,主要是用来融合大模型和Lora模型适用的,属于技术活,普通人一般用不到。

13、stable-diffusion-webui-localization-zh_Hans

SD汉化插件,我们看到的SD汉化界面全靠它,安装它之后,界面上的所有英文几乎都给你翻译成中文。

我们在选择“设置”——“用户界面”——“本地化”可以找到该插件的语言包

14、stable-diffusion-webui-model-toolkit

模型工具箱,它也是一个处理大模型的插件,它是一个用于管理、编辑和创建模型的多用途工具包。

15、stable-diffusion-webui-wd14-tagger

wd14标签器,对于单张图片主要是用来反推图片上的关键词,特别是当你看到一张非常好看的图片,却又不知道它的提示词怎么写,这个插件就可以帮你解决这个问题。

此外他的批量处理功能,则主要是给Lora训练的样本进行打标签使用的,如果你要训练Lora这个是非常好用的一个插件。

16、ultimate-upscale-for-automatic1111

这个插件是对图片进行高清放大的神器,他可以使用较小的内存对图像进行高清放大,对于低显存用户想放大图片非常好用。

17、Stable-Diffusion-Webui-Civitai-Helper

C站助手,这个主要用来管理从C站(civitai.com)上下载下来的大模型,Lora,嵌入式和超网络等内容。

①、我们在SD上点开“C站助手”选项卡,点击扫描(Scan),它就会扫描本地的各种从C站下载模型.

②、扫描完成后,我们在Lora和模型那里就可以看到每个模型上有6个标签。

他们的功能分别是:替换封面,访问模型地址,模型关键词,模型样例,修改模型名,删除当前模型

还有更多好用的插件,我会在后续进行补充,也欢迎大家留言推荐好用的插件。

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

在这里插入图片描述

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

提示词

Stable Diffusion 最强提示词手册

  • Stable Diffusion介绍
  • OpenArt介绍
  • 提示词(Prompt) 工程介绍

在这里插入图片描述

第一章、提示词格式

  • 提问引导
  • 示例
  • 单词的顺序

在这里插入图片描述

有需要的朋友,可以点击下方卡片免费领取!

第二章、修饰词(Modifiers)

  • Photography/摄影
  • Art Mediums/艺术媒介
  • Artists/艺术家
  • Illustration/插图
  • Emotions/情感
  • Aesthetics/美学

在这里插入图片描述

在这里插入图片描述

第三章、 Magic words(咒语)

  • Highly detailed/高细节
  • Professional/专业
  • Vivid Colors/鲜艳的颜色
  • Bokeh/背景虚化
  • Sketch vs Painting/素描 vs 绘画

在这里插入图片描述

第四章、Stable Diffusion参数

  • Resolution/分辨率
  • CFC/提词相关性
  • Step count/步数
  • Seed/种子
  • Sampler/采样
  • 反向提示词(Prompt)

在这里插入图片描述

第5章 img2img(图生图),in/outpainting(扩展/重绘)

  • 将草图转化为专业艺术作品
  • 风格转换
  • lmg2lmg 变体
  • Img2lmg+多个AI问题
  • lmg2lmg 低强度变体
  • 重绘
  • 扩展/裁剪

第6章 重要提示

  • 词语的顺序和词语本身一样重要
  • 不要忘记常规工具
  • 反向提示词(Prompt)

第7章 OpenArt展示

  • 提示词 (Prompt)
  • 案例展示

  • 在这里插入图片描述

标签:Diffusion,插件,必装,模型,提示,webui,SD
From: https://blog.csdn.net/2401_85688943/article/details/139651949

相关文章

  • Stable Diffusion【二次元模型】:超级出色的动漫大模型
    今天给大家介绍的是一个动漫风格的大模型AnimagineXL3.1。AnimagineXL3.1基于StableDiffusionXL构建,旨在通过生成准确而详细的动漫角色,成为动漫迷、艺术家和内容创作者的宝贵资源。AnimagineXL3.1是AnimagineXLV3系列的升级更新,增强了之前的AnimagineXL......
  • Stable Diffusion 3来啦!一键启动!免费使用(附一键安装包)
    本文简介千盼万盼,终于等到StabilityAI开源了StableDiffusion3Medium模型了。这个号称比MJ更牛的模型可以在民用电脑跑起来。本文简单介绍怎么才能用上这个模型~先来看看官方给出的样张。闲话不多说,先看看怎么用起来。简简单单只需几步:下载ComfyUI下载stab......
  • Docker+Jenkins+Pipline如何获取git插件环境变量(提交sha、分支等)以及Jenkinsfile中
    场景Docker中部署Jenkins+Pipline流水线基础语法入门:https://blog.csdn.net/BADAO_LIUMANG_QIZHI/article/details/139672283上面介绍了环境搭建以及Pipeline的Jenkinsfile的常用写法。如果需要通过Jenkins插件获取git相关的信息,比如上一次提交的SHA,分支名称等信息,然后需要输......
  • 【Stable Diffusion】最新SD换脸插件ReActor,视频换脸全流程!流畅丝滑!【附插件及安装报
    今天,我给大家分享一个使用“ReActor”插件来进行视频换脸的案例。视频换脸的思路其实也很简单,其实就是把视频的每一帧都提取出来,然后把每一帧的图片都进行换脸,最后重新把这些图片重新合成一个视频。废话不多说,我们先来看看效果:生成效果原视频如下:杨幂:最后的效果:......
  • 【限免】Stable Diffusion一键部署 开箱即用!
    参加AI写真快闪活动时,教学视频只有几分钟,但您可能自己实操时,仅准备环境、上传下载文件就要花几个小时,甚至一两天,苦不堪言!近期好易智算重磅上线,完美解决了stablediffusion模型、Lora等大文件下载慢的问题,下载速度能稳定达到500M/s,5G左右的文件10秒内搞定,加上其一键部署、开箱即......
  • stable-diffusion-webui 环境配置
    链接:AUTOMATIC1111/stable-diffusion-webui:StableDiffusionwebUI(github.com)查看python版本:   安装完python之后,打开工程,配置虚拟环境 下载安装对应的依赖库,其中的torch相关三个库选择与自己cuda相关的版本安装,我的pytorch选的是2.1.2,下载网址:download.pytorch.o......
  • 自定义MyBatis插件
    插件原理回顾在前面,我们通过MyBatis插件机制介绍与原理分析了MyBatis插件的基本原理,但是可能还只是理论上的分析,没有实战的锻炼可能理解的还是不够透彻。接下来,我们通过自定义插件实例来进一步深度理解MyBatis插件的插件机制。插件接口MyBatis插件接口-Interceptor有......
  • pdf增强插件:Enfocus PitStop Pro 2022 for Mac 激活版
    EnfocusPitStopPro2022是一款功能强大的PDF校对和编辑软件,旨在帮助专业用户对PDF文件进行精确的预检和校对。该软件可以无缝集成到AdobeAcrobat等常用的PDF编辑工具中,提供了一系列全面的预检和编辑功能,以确保PDF文件符合印刷和出版行业的标准和规范。下载......
  • 在线CAD块表的二次开发(react浏览编辑CAD插件)
    前言在DWG数据库中,所有图块都存放在块表McDbBlockTable()中,块表中每一条记录称为图块记录对象McDbBlockTableRecord(),图块记录中存放着所有实体数据,用户可以通过改变图块的属性设置来修改其对应着的实体数据。块表操作1.获取当前控件的数据库块表我们可以通过调用mxcad中的......
  • Glif – 基于 SD 的 AI 绘画浏览器插件
    基于StableDiffusion的AI绘画浏览器插件,你可以在网页上对任何图片根据文本描述来重新生成新的图片样式。例如有些图片素材有版权现在,那么这个时候你就可以用AI来重新生成无版权限制的。功能介绍所有工作流程均由glif.app提供支持,然后使用GPT-4等LLM进行扩展,并......