大家好,我是程序员晓晓
今天给大家推荐一种在 Stable Diffusion WebUI 中实现实时绘画的方法。而且最重要的是,该插件的使用可以让SD支持接入PS/Blender 等设计工具,让设计师、插画师、原画师等图形工作者在工作中效率提升巨大!
一、插件简介
SD WebUI 的实时绘画功能需要借助一个插件实现,这个插件是由 B 站 AI 绘画博主@朱尼酱推出,支持文生图、图生图和桌面应用捕捉,操作界面也非常便捷好用,安装后即可借助 WebUI 的现有资源,在本地免费实现多功能 AI 实时绘画。
二、安装方式
由于这款实时绘画插件是基于 SD WebUI 的,所以使用前大家需要先安装并掌握 SD WebUI 的基础用法,还没有安装使用过SD的小伙伴可以看看我的往期入门教程:AI绘画SD下载安装教程,学习AI绘画软件必看(SD怎么安装,SD安装教程,安装stable diffusion软件必看)
这里推荐使用秋葉大佬的一键整合包,先启动软件,在启动器界面找到「高级选项-启用 API」,将其转为开启模式,然后将「监听设置」下拉框里的「监听地址」改为 0.0.0.0,
在当前页面继续下拉,找到底部的 「CORS 授权管理」选项,打开后在里面输入一个 * 号并按 Enter 保存,然后关闭弹窗,此时的 API 的相关设置就完成了。回到启动器主页,点击「一键启动」打开 WebUI 网页界面,此时网址会显示为 localhost:7860,表明我们的 API 设置成功了。
然后下载我提供的资源包(请看下方扫描免费获取哦),先将里面的 ACC_SD15.safetensors 放置到 stable diffusion 根目录的 models/Lora 文件夹内,这是一个 sd1.5 的 Lcm Lora 模型,可以提升图像的生成速度。然后解压 Jizhi_AI 压缩包(解压后可以更换一下文件的路径,让其不要有中文),找到其中的 Jizhi_AI.exe 程序文件并双击启动,就能看到实时绘画的界面了。
二、使用简介
整个实时绘画的界面非常直观好用,下面为大家简单介绍一下它的用法。
1. 文生图功能
①首先选好大模型(VAE 模型看大模型是否需要),设定好画面尺寸,然后在提示词中输入描述画面的内容,比如 “masterpiece, best quality, a red cup, 3D pixar, bright light”,反向提示词填写常用的即可。
②选取 lora 模型。点击文本框右上角的 “添加 lora” 选项,从中选取我们之前安装好的 ACC_SD15.safetensors,调节滑块设置具体参数,再点击底部的 “确定” 按钮将其添加到正向提示词中。也可以再添加其他已安装的 lora 模型。
③然后启用 controlnet 模型,模型的类型按你输入的内容选择。如果是直接用画笔手绘,可以选择 Scribble/ Sketch,这样对线稿的精度要求低;如果是已有高精度草图或者图像,可以选择 lineart 或者 depth。
④设置完成后即可在画板中进行创作了,每次画板内容的改动都会实时显示在右侧。画笔可以修改颜色及大小;支持橡皮修改和撤销操作;重绘幅度可以调整结果图与原图的相似程度;如果对单次生成的图像不满意,可以点击底部的刷新小按钮,再次生成图像。
⑤除了手绘草图之外,还可以插入图像,与手绘草图结合来引导新图像的生成。
2. 屏幕捕捉功能
实时绘画插件中最实用的应该还是屏幕捕捉功能,我们可以将日常使用的 Ps、Ai、Blender、C4D 或者其他软件的操作界面接入其中,这样操作起来比其自带的画板更方便好用,功能也更多。具体操作方法如下:
①先打开你需要接入的软件或者网页;
②设置好实时绘画的各项基础生成参数,然后选择界面顶部的 「屏幕截图」功能,此时会弹出一个界面,包含各个目前正在运行的软件,从中选择你需要的。
③选中软件后,会有一个红线框用于设置需要截取的画面,一般都会将区域局限在画布之内,然后右下角的 “裁剪” 选项确定范围。
好啦以上就是本期为大家推荐的基于 SD WebUI 的 AI 实时绘画插件,相关资源都请扫描免费获取哦,有需要的小伙伴记得下载~
感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。
AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。
一、AIGC所有方向的学习路线
AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。
二、AIGC必备工具
工具都帮大家整理好了,安装就可直接上手!
三、最新AIGC学习笔记
当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
四、AIGC视频教程合集
观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。
五、实战案例
纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。