首页 > 其他分享 >让AI学会打光,从此利好电商(Stable Diffusion进阶篇:Imposing Consistent Light)

让AI学会打光,从此利好电商(Stable Diffusion进阶篇:Imposing Consistent Light)

时间:2024-09-02 14:26:08浏览次数:13  
标签:Diffusion AI ComfyUI 小伙伴 Light IC 电商 节点 下载

IC-Light的下载安装

有两个不同的节点包可以在ComfyUI中安装IC-Light,一个是kijai大佬的节点包:

https://github.com/kijai/ComfyUI-IC-Light

没有魔法的小伙伴可以扫描下面二维码获取相关整合资料!

在这里插入图片描述

另一个是huchenlei大佬的节点包:

https://github.com/huchenlei/ComfyUI-IC-Light-Native

这两个节点都可以通过Manager安装后在自定义节点文件夹里找到示例的工作流。

关于ComfyUI的安装包和相关工作流可以点击这里:CSDN官方推荐资料整合

下载方式也很简单,打开ComfyUI后点击Manager,然后在网址部分输入上述的两个地址。

根据页面提示下载重启后来到ComfyUI的根目录可以发现有刚好下载好的两个文件夹。

点开任意一个后里面有一些example,这些就是可以直接拖拽进ComfyUI中的工作流。

没有魔法的小伙伴可以扫描下面二维码获取相关整合资料!

在这里插入图片描述

在工作流拖拽到ComfyUI中可以看到有些缺失的地方,这里直接去Manager中寻找缺失节点即可。

在下载完之后会有提示,直接点击最下方的重启即可。

如果有些nodes提示下载失败,则可用URL下载的方法,操作也很简单:

点击这个页面会跳转到该nodes的github仓库,然后将仓库的网址复制粘贴到这个提示框中:

之后再点击重启即可。

IC-Light的操作

在ComfyUI中的操作其实和前面两篇笔记中的操作是大差不差的:

这里我导入的是上面下载的节点包中的工作流:

使用这个工作流要注意的就是加载模型的这个节点记得选用和导入的图片风格类似的大模型,二次元就选二次元,真人风格就选真人风格。

这样调整完之后就可以使用啦!

除此之外开发者也提供了三种不同的进阶工作流,其中有一个工作流标有lightmap,这个节点可以用来生成光线贴图。

所谓的光线贴图就是像上一篇笔记中讲的控制AI生成光照的区域,但是这个默认节点只能生成左侧和右侧的光照。意思就是当AI生成图之后,太阳光等光影效果只会出现在画面的左侧或者右侧。

如果要和之前的笔记一样可以自由控制光线的话,那可以额外加一个Load Image节点。并且为了保证光线贴图能够贴合上传图片的尺寸,还需要再加一个image rezise的节点。

如果在运行的过程中这个节点出现了问题:

解决方法也很简单,来到根目录中名为unet的文件夹中,然后将在Hugging face下载的两个文件放在这里。

https://huggingface.co/huchenlei/IC-Light-ldm/tree/main

在Load Diffusion Model的unet_name选项那里选择fc_unet的这个选项。

当然,可能会有小伙伴遇到这个问题,是Ksampler节点出现了问题:

这个问题困扰了我两天,我已经去发帖子询问了,如果有解决方法后续我会再进行补充的。

而另外两个节点也有一些优化措施,例如这个名为preserve_color(颜色保留)的节点

通过在生成Latent图像的时候部分置入主体区域像素,来做到更好地保持主体颜色,比较适合在采样过程中主体产生了较大色差时使用。

另一个Detailed_transfer(细节迁移)

则是在最终输出环节前加入了一层图像处理节点,让主体上的部分高频细节得到了保留。

素材来源:Nenly同学

IC-Light的出现一定程度上帮助了很多摄影后期甚至是电商的小伙伴,目前市面上已经有不少基于IC-light开发的AI摄影、电商出图等的工作流。

当然,以后还会有越来越多更加成熟的技术出现,我也在期待着那一天的到来。


今天的笔记就到这里结束啦!

我已经头昏眼花了,个人感觉目前比较好的IC-light使用平台还是ForgeUI,还是比较推荐小伙伴到那里尝试的。

当然WebUI也有IC-Light的选项卡,但是好像生效不稳定,等后续完善了我会再去尝试一下。

没有魔法的小伙伴可以扫描下面二维码获取相关整合资料!、

在这里插入图片描述

标签:Diffusion,AI,ComfyUI,小伙伴,Light,IC,电商,节点,下载
From: https://blog.csdn.net/ice_99/article/details/141818876

相关文章

  • 全能型AI与专业型AI的对决:未来趋势与市场潜力
    引言随着人工智能技术的迅猛发展,AI产品的应用领域日益广泛。近日,OpenAI宣布将在秋季推出代号为“草莓”的新AI模型。这款模型不仅能够解决复杂的数学问题,还能处理主观的营销策略,展现出惊人的多样性。此举引发了广泛关注和讨论:全能型AI是否代表了未来趋势?相比专攻某一领域......
  • 几家AI公司的八卦
    国外的大模型主要就下面几个:公司大模型备注OpenAiChatGPTAnthropicClaudeGoogleGemini/GemmaMetaLlamaMistralMistral法国公司MicrosoftPhi他们之间有很多联系,在发布版本时,有时会看到有些针对性发布。AnthropicAnthropic是OpenAI......
  • 只需六步,从0到1教你搭建个人AI知识库
    在这个信息爆炸的时代,拥有一个个人AI知识库对于整理、学习和应用知识至关重要。本文将引导你通过五个步骤,从零基础开始搭建起一个高效的个人AI知识库。第一步:确定知识库方案搭建个人知识库的第一步是选择合适的方案。你可以选择对现有的大型语言模型(LLM)进行微调,或者结合LL......
  • 非结构化数据中台AI大模型对接解决方案
    引言企业数字化升级持续推进,数据要素和相应数据法律法规逐步完善,企业数据合规监管力度加大。大模型等前沿AI技术快速发展,企业利用AI推动生产力发展时也面临着数据安全和合规的挑战。例如AI智能问答应用场景中,企业敏感信息可能被无权限用户获取。此背景下,企业数据安全管理、应......
  • java计算机毕业设计家具销售电商平台(开题+程序+论文)
    本系统(程序+源码)带文档lw万字以上 文末可获取一份本项目的java源码和数据库参考。系统程序文件列表开题报告内容研究背景:随着互联网技术的飞速发展,电子商务已成为现代商业活动不可或缺的一部分,深刻改变了人们的消费习惯。在家具市场,传统销售模式受限于地域、时间等因素,难......
  • OpenAI-Agents: 人工智能代理的力量与科技搜索的新方向
    OpenAI-Agents:人工智能代理的力量与科技搜索的新方向在人工智能快速发展的今天,OpenAI-Agents项目为我们展示了AI在生成高质量文本和理解复杂主题方面的惊人能力。这个由AI完全撰写的应用程序和论文集合,不仅体现了人工智能的潜力,更为科研和技术探索开辟了新的方向。让我们深......
  • RAG在PostgreSQL上的实现:使用Azure Container Apps和OpenAI构建智能问答系统
    RAG在PostgreSQL上的实现:使用AzureContainerApps和OpenAI构建智能问答系统随着人工智能技术的快速发展,越来越多的企业和开发者开始探索如何将AI能力整合到现有的应用系统中。本文将介绍一种基于检索增强生成(RetrievalAugmentedGeneration,RAG)的方案,通过结合AzureCo......
  • CLIP Playground: 探索OpenAI强大的零样本学习能力
    CLIP模型简介CLIP(ContrastiveLanguage-ImagePre-training)是由OpenAI开发的一个强大的多模态AI模型。它能够将自然语言和图像联系起来,展现出令人惊叹的零样本学习能力。CLIP通过对大规模的图像-文本对数据进行预训练,学习到了丰富的视觉-语言知识。这使得CLIP可以直接应......
  • Stable Diffusion majicMIX_realistic模型的介绍及使用
    一、简介majicMIX_realistic模型是一种能够渲染出具有神秘或幻想色彩的真实场景的AI模型。这个模型的特点是在现实场景的基础上,通过加入一些魔法与奇幻元素来营造出极具画面效果和吸引力的图像。传统意义的现实场景虽然真实,但通常情况下缺乏奇幻性,而majicMIX_realistic模型就是为了......
  • 建议收藏丨大学开学必备的 5个 AIGC工具
    1.讯飞公文写作踏入大学门槛,面对的不仅仅是课堂与考试,更重要的是日常的课程任务和那份毕业论文。每当打开文档,面对空白的屏幕,大脑便开始绞尽脑汁:主题定什么好?开头怎样才吸引人?去哪里搜集资料?哪里能找到合适的参考文献?头脑一片空白,有没有!!!科大讯飞的AI公文写作助手是基于星火......