首页 > 其他分享 >ComfyUI 实战教程:模特换装/虚拟试衣

ComfyUI 实战教程:模特换装/虚拟试衣

时间:2024-09-23 14:22:04浏览次数:10  
标签:服装 换装 需要 ComfyUI 模型 模特 试衣

大家好,我是每天分享AI应用的萤火君!

这篇文章给大家介绍下使用AI进行模特换装或者虚拟试衣的方法,使用这项技术有很多优势,这里简单总结三点:

  • 节省成本和时间:商家不用请真人模特,减少了费用;顾客可以更快地看到试穿效果,减少退换货的麻烦。
  • 提升购物体验:顾客能在购买前预览衣服上身效果,增加购物信心;商家可以提供更多样化的展示,吸引更多顾客。
  • 增加便利性和多样性:顾客可以随时随地尝试不同风格的衣服;商家可以更容易地展示多种体型和样貌的效果。

效果展示

话不多说,先来看下效果。

只需要一个人物的形象照片,服装的平铺照片,不需要手绘蒙版,一键就可以生成这个人物穿搭这件服装的效果图。

或者通过提示词为模特生成不同的穿搭风格。

环境准备

你需要有一个ComfyUI的运行环境。

本地安装

如果你本地有一个24G显存的Nvidia显卡,可以参考我这篇文章,在本地部署一个ComfyUI:

手动安装部署

不过想要运行本文介绍的工作流,你还要安装缺失的插件节点、下载相关的模型,这个难度和工作量不容小视,没有点技术功底不要轻易尝试。

云环境镜像

如果你本地没有相关的资源,也不想费力吧啦的自己部署,或者就是想看看效果,可以直接使用云镜像,一键开启,直接使用。

镜像访问地址:ComfyUI云镜像体验icon-default.png?t=O83Ahttps://www.haoee.com/applicationMarket/applicationDetails?appId=27&IC=XLZLpI7Q

注册成功后,点击页面上的“立即创建”,即可开启 ComfyUI 应用,如下图所示:

应用创建后会自动跳转至“工作台”。启动成功后,状态将显示为“运行中”,此时点击“打开应用”,即可在浏览器进入操作界面。本应用启动大约需要1-2分钟,如果打开页面显示空白,请刷新再尝试。

ComfyUI在浏览器中启动后,我们可以先通过设置切换到中文界面:

然后点击“加载”旁边的小箭头,选择一个“换装”工作流,点击“添加提示词队列”,就可以开始愉快的生成了。

文生图换装

我们首先来看一下这个文生图的工作流,可以通过提示词为模特更换不同的服装。

这个工作流主要由三部分组成:基础模型、提示词和ControlNet。

  • 基础模型影响图片的服装风格,大家根据需要选择即可,可以尝试不同的模型看看。
  • 提示词控制要为模特更换的服装样式、颜色等,比如这里把白色的西装换成红色,根据需要输入即可。
  • ControlNet:这里使用了两个ControlNet,OutFitToOutFit和OpenPose,其中OutFitToOutFit是换装的关键。文末有这个ControlNet模型的下载方式。

图生图换装

这里我提供两个工作流,一个使用IDM-VTON,另一个使用OOTDiffusion。

先看IDM-VTON,这个工作流节点比较多,为了换装:

  • 首先需要上传模特图和服装图,它会对图片进行一些预处理;
  • 然后还需要对模特身上的衣服进行抠图,可以自动抠图,也可以手动抠图;
  • 另外还需要生成模特的姿势图片,保持换装后的体态不变。
  • 最后是使用扩散模型进行服装的替换。

IDM-VTON 的使用略显麻烦,对于服装样式的更换效果也不太好。

再看另一个工作流。这个工作流最关键的部分就是 OOTDiffusion节点,它会简单很多,只需要把模型准备好,上传模特图片和服装图片即可换装。这里我们也可以串联文生图的模型,生成一张模特的照片,然后再进行换装。

这里的模型 type,分为 Half Body和 Full Body,也就是只更换上半身或者全身的意思,对于T恤就是上半身,如果是裙子,就得选择全身了。另外这里用到的节点是从本地加载模型,比较适合国内网络环境。

注意目前AI换装都需要比较平整的服装图片,侧面的、存在折叠的,或者穿在身上的服装可能效果不好,有兴趣的可以实际测试下。

资源下载

制作不易,相关模型和OOTDiffusion工作流目前仅在我的AI绘画专栏中提供下载,如有需要请点击:https://xiaobot.net/post/03340243-9df6-4ea0-bad6-9911a5034bd6


以上就是本文的主要内容。

用好 ComfyUI:

  • 首先需要对 Stable Diffusion 的基本概念有清晰的理解,熟悉 ComfyUI 的基本使用方式;
  • 然后需要在实践过程中不断尝试、不断加深理解,逐步掌握各类节点的能力和使用方法,提升综合运用各类节点进行创作的能力。

我将在后续文章中持续输出 ComfyUI 的相关知识和热门作品的工作流,帮助大家更快的掌握 Stable Diffusion,创作出满足自己需求的高质量作品,感兴趣的同学请及时关注。

标签:服装,换装,需要,ComfyUI,模型,模特,试衣
From: https://blog.csdn.net/bossma/article/details/142448329

相关文章

  • 「ComfyUI」Flux.1:太酷啦,微型人物,小人国进入大千世界
    Flux.1的社区是越来越好了,有趣的Lora也是一个接着一个,今天我们来分享一个微型人物的Lora模型。把自己缩小,周边的事物不变,看着比我们还高的手机和鼠标,梦入巨物的世界里,不知道会不会突然有种巨物恐惧症的感觉呢?好了,话不多说,我们直接开整。我们直接来看效果,模型听雨会放......
  • 「ComfyUI」生图修图神器,自定义调节颜色光暗,更生动更强对比度生图技巧分享!
    今天再给小伙伴们分享一个简单又实用生图神器插件,可以调整整个图像的光暗变化以及颜色变化。原理的话,我们也简单来说下,我们在使用VAE将图像编码为潜在噪声时,VAE解码的值通常在一定范围内,使得最终的潜在噪声只有较小的值范围,而作者做的就是编写了一个函数扩大了这个值的范围......
  • 「ComfyUI」Flux.1:太赞了,亚洲人脸,胶片质感,更真实的人像,更细腻的光影体验!
    今天我们来分享一个专门用来给Flux.1模型增强胶片质感的Lora,使用以后,人像更真实,光影更细腻,也对亚洲人脸更友好。好了,话不多说,我们直接开整。直接来看效果,模型听雨会放在文末的网盘里,需要的小伙伴自取。提示词:Asimpleandunforgettableportraitdepictsalonelygir......
  • Flux【基础篇】:ComfyUI Flux.1工作流的本地部署安装教程
    前言ComfyUIFlux.1工作流不仅在技术层面上实现了突破,更在艺术创作领域开辟了新的天地。利用提示词创作出独特的AI艺术作品,艺术家可以展现更加个性化和创意的作品。让我们一起探索ComfyUIFlux.1工作流的本地部署安装教程,开启AI艺术创作的新篇章。今天我们来分享一下如何......
  • AI绘画:24最新ComfyUI文生图食用指南,学不会你来找我!
    前言ComfyUI作为一款基于StableDiffusion的节点式操作界面,为用户提供了一个更加灵活和高效的文生图(文本生成图像)创作环境。本篇博客将详细介绍如何使用ComfyUI进行文生图操作,无论你是初学者还是有一定基础的用户,都能够通过本指南快速上手。书接上文,香型大家已经完成了Sta......
  • 【ComfyUI】轻松一键视频转动漫!太棒了!超强稳定视频转绘工作流,如此丝滑~!
    今天就给大家带来了这一款超稳定视频转动漫风格工作流。视频转绘这么火的赛道下,老铁们怎么能不会呢。下面我们一起来看一看。DiffSynth-Studio介绍**项目地址:DiffSynthStudio是一款Diffusion引擎。它重构了包括TextEncoder、UNet、VAE等在内的架构,在增强计算性能......
  • Comfyui喂饭级教程:为什么要学Comfyui?
    前言:在当今快速发展的社会,掌握一项实用的技能对于安身立足至关重要。很多人推荐学习编程、数据分析等技术,但其中最引人瞩目的当属人工智能(AI)。特别是AI绘画,融合了艺术与科技,成为了当今最具潜力的领域之一。通过学习AI绘画,你不仅可以探索创意的无限可能,还能在科技驱动的市场......
  • Stable Diffusion-AI美女模特写真使用InstantID插件(附插件)
    ControlNet单元1:上传人脸定位照上传任意一张照片,它的作用是控制最终出图的人物脸部位置。我们可以和第一张图片一样。相关[参数设置如下:控制类型:选择"Instant_ID"预处理器:instant_id_face_keypoints模型:control_instant_id_sdxl控制权重:0.5左右(0.45-0.5)【第......
  • java计算机毕业设计模特兼职网站(开题+程序+论文)
    本系统(程序+源码)带文档lw万字以上 文末可获取一份本项目的java源码和数据库参考。系统程序文件列表开题报告内容研究背景随着互联网技术的飞速发展,电子商务与社交媒体的深度融合,模特行业正经历着前所未有的变革。传统模特行业依赖于线下经纪公司及行业内部推荐,效率相对较......
  • ComfyUI 基础教程(四) —— 应用 LoRA 模型控制图像生成特征
    前言上一篇文章讲述了ControlNet模型的使用,如果掌握了ControlNet的使用之后,本文所讲的Lora模型将会非常容易理解。一、LoRA模型的概念之前的文章中,在介绍模型种类时,简单介绍过Lora模型,LoRA模型全称是Low-Rank-AdaptaionofLargeLanguageModels。是一种用于微调......