首页 > 其他分享 >【本地+在线】Comfyui的基本工作流的搭建----文生图+图生图

【本地+在线】Comfyui的基本工作流的搭建----文生图+图生图

时间:2024-08-16 23:24:53浏览次数:11  
标签:插件 1.2 图生 文生 Comfyui 我们 comfyui 下图 加载

一.(本地使用comfyui)基本模块的了解

1.1这是初始界面

1.2搭建一个基本的工作流(如果使用的是秋叶大佬的包,每次进入会自动出现该工作流)

1.2.1加载器和取样器:

加载器,鼠标右键,点击新建节点,按下图操作,出现加载器

取样器,鼠标右键,然后按下图操作

可以看到如图结果:我们将“模型“连接起来;

1.2.2clip文本编辑器

如图一:我们从正面条件那里拉出一条“线“到空白处,然后松开,会显示出图二的提示,我们选择CLIP文本编辑器就可以了,然后对负面条件进行同样的操作:

图一

图二

结果如图:注意到,我们要把对应的CLIP连接起来

1.2.3Latent和VAE解码

如图,我们从k采样器左下角的latent拉出一条“线“,然后松开鼠标,会出现图二的提示,我们点击空Latent

图一

图二

结果如下图:

Vae解码:对K采样器左侧的Latent进行拉“线“,选择Vae解码:

然后,我们要将Vae解码的VAE和我们最开始创建的加载器的VAE连起来:

1.2.4图像的预览

同样的,我们从刚刚创建的VAE上引出一条“线“,松开鼠标,然后在提示里选择预览图象即可

1.2.5最后的结果和运行

最后的结果如下图:

注:事实上,我们没有必要每次用comfyui时都来创建比这个基本骨架更加完善的工作流,你可以使用b站秋叶aaaki的comfyui整合包(点击跳转),这位大佬的整合包会在你每次启动时默认搭建好了工作流,相当方便。

点击添加提示词队列:

生成结果如下图:

(结果,在这里没有添加任何其他的插件)

1.2.6图生图的搭建

图生图事实上是在文生图的框架上进行略微的修改,修改步骤如下:

首先:右击鼠标,按照下图的操作,加载一张图片:

然后选择我们要处理的图片,同时把原来的空Latent删去(如下图):

和其他模块连接,如下图:

然后就可以开始图生图了

1.3辅助插件的了解

1.3.1翻译类的插件,可以帮助我们更好的写提示词

按照下图操作使用该插件,三种翻译插件实际上都可以用于翻译提示词,这取决于你的习惯,可以自己用用看看适不适合哦~

使用这种插件的好处之一是:在输入提示词时,可以直接输入中文,该组件会帮助翻译为英文,一种连接方式如下图:

该图中的“预览文本“和”CLIP文本编辑器“可分别由下图得到:

注:该插件的翻译有时候不尽人意,仅面向于英文可能不是很熟练的朋友

二.(本地使用comfyui) 总结

Comfyui与web-ui的不同在于comfyui允许我们更精确的控制我们所生成的图片,但是同时,comfyui更加难以上手,往往需要我们拥有相关的前提知识(基础知识)才能比较自由地去使用,上述的操作,仅仅是一个最基础的工作流,无法实现和lora等等内容一起去调节图片的生成,但是如果这个简单的comfyui的工作流的搭建让你对AIGC有了更浓厚的兴趣,更愿意去探索这片位置的领域,这篇博客也就达成了它本身的意义。

三.(从魔搭社区开始使用comfyui)在线体验

Comfyui作为AIGC的一个工具,它太大了,如果你等不及让它慢慢地下载完,也许你可以试试魔搭社区,在这里,你可以在线使用comfyui,并且它更快(也许?),免去了你等待的时间。

1.1进入魔搭社区的个人界面,找到下图显示的位置:

点击启动,会跳转到另一个界面

1.2打开comfyui

在跳转出来的界面中,按照下图的步骤创建一个Terminal

在Terminal中复制如下的代码:

git lfs install

git clone https://www.modelscope.cn/datasets/maochase/kolors_test_comfyui.git

mv kolors_test_comfyui/* ./

rm -rf kolors_test_comfyui/

mkdir -p /mnt/workspace/models/lightning_logs/version_0/checkpoints/

mv epoch=0-step=500.ckpt /mnt/workspace/models/lightning_logs/version_0/checkpoints/  

双击左栏的Comfyui,然后点击下图中红框中的标记,等待它运行完毕,

运行完毕后,复制然后进入下图中用红框框起来的地址:

这样就打开了comyui。

1.2尝试运行comfyui

       我们要先加载模型,这些模型你可以在:Datawhile|魔搭社区怎么使用comfyui中找到,同时也有相应的教程,你可以在教程的对应的部分找到带lora和不带lora的模型

      1.3结语

你可以在魔搭社区体验comfyui的使用,提前熟悉它的界面和使用方法

标签:插件,1.2,图生,文生,Comfyui,我们,comfyui,下图,加载
From: https://blog.csdn.net/javanaxx/article/details/141269686

相关文章

  • Datawhale X 魔搭 AI0夏令营 魔搭-AIGC文生图方向 Tsak 3 就要完成了...
    本文为AI方向小白记录暑期参加魔搭夏令营-AIGC文生图方向的Task01    报名赛事链接:可图Kolors-LoRA风格故事挑战赛_创新应用大赛_天池大赛-阿里云天池的赛制    欢迎所有小白,大神前来交流学习。一.初识ComfyUI    1.1什么是ComfyUI      ......
  • Datawhale X 魔搭 AI0夏令营 魔搭-AIGC文生图方向 Tsak 1
    本文为AI方向小白记录暑期参加魔搭夏令营-AIGC文生图方向的Task01    报名赛事链接:https://tianchi.aliyun.com/competition/entrance/532254    欢迎所有小白,大神前来交流学习。一.文生图相关基础知识介绍    1.1文生图的介绍        文......
  • Datawhale X 魔搭 AI夏令营 第四期魔搭-AIGC文生图方向Task3笔记
    工具初探一ComfyUI应用场景探索ComfyUI剖析视频:1万字系统剖析ComfyUI|StableDiffusion:GUI全盘点  ComfyUI应用场景视频:ComfyUI应用场景探索官方Github链接:GitHub-ComfyUI官方应用的示例:ComfyUIExamples 工作流分享网站:ComfyWorkflows在魔搭使用ComfyUI:在魔搭......
  • ComfyUI系列教程(4)--ComfyUI基础节点LoRA
    ComfyUI基础节点LoRA2.ComfyUI基础节点2.1.LoRA2.1.1.LoRA原理2.1.2.LCM-LoRA2.1.3.ComfyUI示例2.ComfyUI基础节点本文主要介绍LoRA模型及ComfyUI中LoRA的连接方式。2.1.LoRALoRA是一种低成本微调大模型的方法,可以通过训练LoRA模型增强对应版本大模型的生成......
  • 喜欢黑丝还是白丝?AI绘画工具 ComfyUI局部重绘助你实现丝袜自由!想看什么直接生成~
    大家好,我是灵魂画师向阳不得不承认,荷尔蒙才是第一生产力!什么?你不信!看看那些短视频平台,发个普通视频也就几百的播放量,随便发个美女都能轻松上千,还有比这更容易的吗?!好了,随便感叹一下,我们现在进入正文。这篇文章的主题和美女有关,不过并不是教大家生产美女视频,而是讲解如何使......
  • ComfyUI的安装和基础使用
    简介最近了解了一下AI画图,是通过ComfyUI工具入门的,这里记录一下该工具的安装和基本使用流程。本文的内容将涵盖:ComfyUI的安装ComfyUI的基本使用LoRA模型的使用一些插件推荐一些教程推荐硬件条件:一台通过AutoDL私有云访问的Linux服务器,单卡RTX4090,显存24G......
  • 时下最火AI绘画工具comfyui和webui的差别和优劣势,选择最适合自己的AI工具
    ComfyUI简介:ComfyUI是一个高度模块化和灵活的用户界面,专注于提供复杂的图像处理和生成功能。它通常被用作高级用户和开发人员的工具。优点:高度模块化:ComfyUI允许用户通过模块化组件来构建自己的图像处理流程。用户可以自由组合和配置这些组件,以满足特定需求。......
  • (3-2)文生图模型架构:Transformer架构
    3.2 Transformer架构Transformer是文生图模型架构的重要组成部分之一,具体来说,Transformer被广泛应用于文本编码部分,即实现文本编码器的功能。3.2.1 Transformer的基本结构Transformer架构是由Vaswani等人在2017年提出的一种基于注意力机制的深度学习模型,广泛应用于自然......
  • 横空出世的文生图大模型:FLUX.1,怎么用 Python 操作它呢?
    提到文生图、图生图,你首先肯定会想到StableDiffusion、Midjourney,但最近又有一个文生图模型横空出世,它就是由StableDiffusion原班人马打造的FLUX.1。FLUX.1包含专业版、开发者版、快速版三种模型,它们的区别如下:FLUX.1[pro]专业版,最先进的一个版本,具有顶级的提示词遵循、......
  • 【ComfyUI】AI绘画 一键换人 脸工作流,学会你也可以实现随时换脸啦~低调使用,别太邪恶哦!
    大家好,我是画画的小强在这个数字时代,变脸不再是魔术师的专利,也不是好莱坞特效的专属领域。现在,有了【comfyui】AI绘画一键换脸工作流,你也能轻松掌握这项令人惊叹的技术!只需动动手指,瞬间就能换上一张新的面孔,仿佛打开了通往平行世界的大门。无论是想在社交媒体上尝试新形象,......