首页 > 其他分享 >写给设计师的ComfyUI教程——FLUX工作流

写给设计师的ComfyUI教程——FLUX工作流

时间:2024-11-13 11:44:57浏览次数:3  
标签:显存 教程 FLUX ComfyUI 模型 8g Flux 文件夹 SD

吐槽下,AI时代,知识更迭会越来越快,每个月,就会有一些技术迭代。各种营销号今天出一个技术就吊打xx,明天出一个技术就吊打xx,展示的全都是优点,缺点是一点不提。就拿Flux为例,控制网除了挺多了,就很少有人告诉你目前的控制都没有那么好用。很多东西需要自己测试才知道。每个技术都有它的优点和缺点。今天的技术,也许明天就被替代了,我尽量会把这些知识点梳理测试过之后,挑一些成熟的技术来写成教程。让同学们少踩点坑吧

同学们是否记得之前提到过过从SD公司离职的一批人成立了黑森林工作室,然后推出了效果令人惊叹的Flux大模型。截止到今天,主流基础大模型又新增一员,就是SD公司新推出的SD3.5,这一款对标Flux的大模型,比之前的SDXL模型有着很大的提升。但是视觉风格还是略逊于Flux。

即使Flux那么强大,但是现在依然不是一款完美的模型。优点是在写实方面效果吊打一切模型,说是断水流大师兄也不为过。本文的配图都是基于Flux生成

但是Flux缺点也非常明显。之所以文章到这里才介绍Flux,实在是因为Flux的运行条件比较苛刻。如果文章刚开始就直接介绍Flux,估计只有小部分同学可以使用Flux工作流。

官方发布的Flux模型的版本如下:

FLUX.1 Pro 最强,不开源,只能商用。

FLUX.1 Dev 很强,开源,推荐。

FLUX.1 Schnell 速度快,但牺牲了质量,效果不如Dev,不推荐。

比如完整的模型flux1-dev是23g,量化删简版的fp8模型也有11g,这就意味着,使用完整模型的情况下,即使是目前最新的显卡4090显存24g也捉襟见肘。不过庆幸的是,删减量化版的模型效果也不错,这也是我经常使用的版本,平均出1k图22秒(4090)。

那么低显存的同学是不是就和Flux无缘了?

NONONO,当然不是,毕竟24g显存的显卡不是主流,主流仍然是6g,8g或12g的显卡们。多亏City96这位大神发布了Flux的一系列GGUF版本,甚至精简到4g。这套模型也得到了Flux官方的认可。

**到底多低的显存可以使用Flux?


6g勉强,8g能用,12g和16g更好,24g完美

我也给大家测试了,大家注意后面的占用的gb大小,模型体积越大,质量越好。比如Q2虽然只有4g大小,但是质量一般,到Q4的时候,就完全可以接受了。Q4不到8g。所以8g显存完全可用,但是低于8g,只能用Q2模型体验体验吧,出图就勉强,低显存同学还是更推荐SD。同学们心里有数了吧?

关于如何使用GGUF版本我们视频中说,接下来继续说下Flux另一个缺点——不够可控。要是Flux可以像SD那样控制力很强的话,就差不多是个完美模型了。不知道什么原因,Flux的IPA和控制网已经出了很多的版本了,比SD的控制力要差很多。目前来讲,还不能以以前学习SD的逻辑来学习Flux。当然这和Flux也就出现几个月有关,未来这方面可能会更加成熟。让我们期待一下。

照旧先下载网盘中的模型。
在这里插入图片描述

下载好之后,先打开你的ComfyUI文件夹ComfyUI\models\
找到 unet,clip,vae,loras三个文件夹,把模型包的模型分别放到这三个对应的文件夹就好。

同学们可能会疑问,大模型不都是放到checkpoint文件夹吗?是的,flux也可以放到checkpoint的文件夹,官方建议的是unet文件夹。这两个所需的节点是不同的。本教程我们以unet为例。

标签:显存,教程,FLUX,ComfyUI,模型,8g,Flux,文件夹,SD
From: https://blog.csdn.net/2401_84830464/article/details/143736364

相关文章

  • ComfyUI-CogVideoX_图片生成视频、文字生成视频工作流,相关软件包及工作流均已打包好,一
    「文末提供获取方式」▼本期带来图片生成视频模型工作流,此工作流操作简单,相关ComfyUI软件包、模型、节点、工作流均已打包在内,一键启动即可。开源地址(源码):https://github.com/THUDM/CogVideo开源地址(节点):https://github.com/kijai/ComfyUI-CogVideoXWrapper#配置要......
  • 超详细的 Stable Diffusion Webui入门教程 基础操作
    前言工欲善其事,必先利其器!今天我们聊聊StableDiffusionWebUI的基础操作以及各个参数都代表了什么。一、大模型的切换在StableDiffusion(以下简称SD)的背景下,大模型通常意味着,它能够更准确地理解给定的文本提示,生成更符合用户期待的图像。这些大模型通常是通过使用......
  • 零基础入门大模型教程,2024最详细的学习路线,让你少走99%弯路!
    第一阶段:基础理论入门目标:了解大模型的基本概念和背景。内容:人工智能演进与大模型兴起。大模型定义及通用人工智能定义。GPT模型的发展历程。第二阶段:核心技术解析目标:深入学习大模型的关键技术和工作原理。内容:算法的创新、计算能力的提升。数据的可用性与规模性......
  • 【SigmaPlot 15.0.0.13软件下载与安装教程】
    1、安装包SigmaPlot15:链接:https://pan.quark.cn/s/b5103c671458提取码:1fsQ2、安装教程(过程安装建议关闭杀毒软件)1)       双击SigmaplotInstaller.exe安装,弹窗安装对话框  2)       点击Next   3)       选择Iaccept,点击Next  ......
  • 第三百二十二节 Java线程教程 - Java原子变量、Java显式锁
    Java线程教程-Java原子变量新线程并发包java.util.concurrent和java.util.concurrent.atomic和java.util.concurrent.locks包括非常有用的并发构造。线程并发包以四种方式支持并发。原子变量锁同步器并发集合原子变量原子变量类的命名类似于AtomicXxx,例如,AtomicInteg......
  • 第三百二十三节 Java线程教程 - Java同步器
    Java线程教程-Java同步器同步器对象与一组线程一起使用。它维护一个状态,根据它的状态,它让一个线程通过或强迫它等待。本节将讨论四种类型的同步器:SemaphoresBarriersLatchesExchangers信号量信号量用于控制可以访问资源的线程数。java.util.concurrent包中的Semaphor......
  • 番外-JDBC:2024年最新java连接数据库教程
    前言JavaScript的内容晚点更新,今天继续更新一点番外,今天更新的是jdbc,如何用java连接数据库1.导包要使java能够连接数据库我们需要导入一个包,请按照以下操作安装并导包1.进入官网MySQL以上为官网链接进去后点击下载继续按图片点击 根据自己使用的语言选择,这里演示的......
  • 2024 Webstorm安装教程(附激活,亲测有效)
    第一步下载Webstorm下载完成后,进行安装,next,安装完成首次打开,会要求输入激活码才能使用第二步点击获取补丁文件保存下载之后进入文件夹***/JetBrains2023最新全家桶激活***找到文件/方式3:永久激活补丁+脚本(适合最新版本,可显示到2025年)点击进入/scripts注意:以后这......
  • [这可能是最好的Spring教程!]Maven的模块管理——如何拆分大项目并且用parent继承保证
    问题的提出在软件开发中,我们为了减少软件的复杂度,是不会把所有的功能都塞进一个模块之中的,塞在一个模块之中对于软件的管理无疑是极其困难且复杂的。所以把一个项目拆分为模块无疑是一个好方法┌──────┐┌─......
  • CentOS 7 超详细安装教程指南总结
    CentOS7详细安装教程一、安装前准备1.1CentOS简介CentOS(CommunityEnterpriseOperatingSystem,中文意思是社区企业操作系统)是一种基于RedHatEnterpriseLinux(RHEL)源代码构建的免费开源操作系统。它在稳定性、安全性和可靠性方面表现出色,被广泛应用于服务器环境、企业......