首页 > 其他分享 >大模型LCM-LoRA

大模型LCM-LoRA

时间:2024-05-22 11:08:32浏览次数:18  
标签:Models 模型 生成 图像 LCM LoRA 步数

地址 https://github.com/luosiallen/latent-consistency-model

LCM「 全称 Latent Consistency Models(潜在一致性模型)」,是清华大学交叉信息科学研究院研发的一款生成模型。它的特点是可以通过少量步数(4-8 steps)推理合成出高分辨率图像,使图像生成速度提升 2-5 倍,需要的算力也更少。官方称 LCMs 是继 LDMs「 Latent Diffusion Models (潜在扩散模型)」之后的新一代生成模型。

用过 Stable Diffusion 的同学都知道,我们在生成图像的时候需要设置一个「 采样步数 Steps」的参数,这个参数,涉及到的是 Diffusion 模型中的去噪(Denoise)过程,
即以迭代的方式从一张纯噪声图中一步步去除噪点,直至它变成一张清晰的图像。这个过程采样步数至少需要20步。
而LCM中的「 Consistentcy Models(一致性模型)」对去噪推理这一步进行了优化,它不再需要像 Diffusion 模型那样多步进行迭代,而是追求“一步完成推理”,
这样需要处理的步数减少了,图像的生成速度自然就提升了。同时,LCM 在 Consistency Models 的基础上引入了「 Lantent Space (潜空间)」技术,
进一步压缩了需要处理的数据量,从而实现超快速的图像推理合成。LCM 官方以此方法训练了一个新的模型 dreamshaper-v7,该模型仅通过 2-4 步就能生成一张 768*768 分辨率的清晰图像。下图展示了通过1-4步推理生成的图像。

LCM-LoRA模型在技术实现和性能方面都展现了显著的优势。它不仅提高了图像生成的效率,还降低了计算成本。

标签:Models,模型,生成,图像,LCM,LoRA,步数
From: https://www.cnblogs.com/qcy-blog/p/18205796

相关文章

  • 什么是大模型?
    1.大模型的定义大模型是指具有大规模参数和复杂计算结构的机器学习模型。大模型是指具有大规模参数和复杂计算结构的机器学习模型。这些模型通常由深度神经网络构建而成,拥有数十亿甚至数千亿个参数。大模型的设计目的是为了提高模型的表达能力和预测性能,能够处理更加复杂的任务......
  • 基于yolov2深度学习网络模型的鱼眼镜头中人员检测算法matlab仿真
    1.算法运行效果图预览   2.算法运行软件版本matlab2022a  3.算法理论概述      基于YOLOv2深度学习网络模型的鱼眼镜头中人员检测算法结合了YOLOv2的高效目标检测能力和对鱼眼镜头畸变的校正处理,以实现对鱼眼图像中人员的准确识别。YOLOv2(YouOnlyLookO......
  • BP神经网络实现分类模型
    训练数据生成每个x向量维度为3,y标签使用one-hot编码进行3分类。生成的数据如下:构建BP神经网络模型初始化权重和偏置矩阵如下:训练神经网络绘制梯度下降损失函数曲线图附(如果采用梯度下降更新权重,即权重值发生少量变化后,基于损失值的变化更新权重的方法如下:......
  • 「网络流浅谈」最小割的模型
    最大权闭合子图引入Introduction闭合子图指对于子图\(G=(V,E)\),\(\forallu\inV,(u,v)\inE\),都有\(v\inV\)。最大权闭合子图无非就是对于所有的闭合子图\(G\)中\(\sum_{u\inV}w_u\)最大的闭合子图。对于这个图中,闭合子图有哪些呢?红色框圈画出的即为\(1\)个......
  • 互斥锁,IPC机制,队列,生产者消费者模型
    Ⅰ互斥锁【一】什么是互斥锁互斥锁其实就是一种锁。为当前进程或线程添加额外的限制限制当前时间段只能由当前进程使用,当前进程使用完成后才能其他进程继续使用其作用是保证在同一时刻只有一个线程在访问共享资源,从而避免多个线程同时读写数据造成的问题。互斥锁的基本原......
  • 模型选择
    模型选择采用敏捷软件开发过程模型。以下是选型的理由:1.需求变化频繁由于需求经常会发生变化,采用传统的瀑布模型容易导致开发滞后、项目延期等问题。而敏捷开发强调快速响应客户需求,能够更好地适应需求变化。2.开发周期较短高校社团管理系统是一个小型的项目,开发周期相对较短......
  • 3D学校模型:开启未来教育的全新篇章
    随着科技的飞速发展,教育领域也迎来了前所未有的变革。 3D学校模型:开启全新学习体验3D学校模型,是通过3D建模技术构建的学校立体模型。它不仅能还原学校的真实场景,还能实现多角度、全方位的展示,学生能身临其境地走进学校的每一个角落,感受不同教室的学习氛围,探索各种功能区域。这......
  • 鸿蒙HarmonyOS实战-Stage模型(卡片数据交互)
    ......
  • STAR模型
    “故事是人类的共同语言。”在管理中,故事的力量不容忽视。 如何讲好一个故事?试试STAR模型吧!   先设定情境(Situation),再明确任务(Task),然后描述行动(Action),最后展示结果(Result)。 这样的故事不仅生动有趣,更能展现你的能力和成就。 “故事是最有感染力的教育方式。” ......
  • ACE模型
    决策是管理的核心,但决策并不总是那么容易。 使用ACE模型,让你的决策更加高效和准确。 先评估(Assess)情况和选项,再选择(Choose)最佳方案,最后执行(Execute)决策。简单而直接,却能在关键时刻为你指明方向。 1. 评估:快速评估情况和可行选项为决策提供依据。 2. 选择:选择最......