LCM 是什么
在人工智能领域,图像生成技术一直是研究的热点。然而,尽管取得了显著进展,现有技术如 Stable Diffusion 等在生成高质量图像时仍面临速度瓶颈。多步迭代采样过程不仅耗时,而且增加了推理成本,限制了这些技术在实时应用场景中的潜力。
为了解决上述问题,清华大学交叉信息研究院的研究者们提出了一种创新的模型——Latent Consistency Models(潜在一致性模型),简称 LCM。与传统的迭代求解不同,LCM 采用直接的单步求解方法,理论上能够在单步内生成图片,显著减少了生成时间。LCM 能够实现 1~4 步内生成高质量图片,相比现有技术在实际推理时间上实现了约 4 倍的加速。
如何在 ComfyUI 中使用
将以下图片拖入 ComfyUI 页面
导入后工作流如下图:
需要注意的是 cfg 应使用很小的值,可以 1~3
Sample 使用 lcm, scheduler 使用 sgm_uniform 或者 simple
Steps 设置 5~8 即可
模型下载
官方地址:
SDXL: https://huggingface.co/latent-consistency/lcm-lora-sdxl
SD1.5: https://huggingface.co/latent-consistency/lcm-lora-sdv1-5
夸克网盘:
SDXL+SD1.5: https://pan.quark.cn/s/cdb9e71513ce