首页 > 其他分享 >Stable Diffusion【应用篇】【插画转绘】:建筑风景图片的插画转绘制作教程

Stable Diffusion【应用篇】【插画转绘】:建筑风景图片的插画转绘制作教程

时间:2024-10-16 14:21:28浏览次数:7  
标签:Diffusion 颜色 AI 模型 插画 风景图片 tile 图片

学好 AI绘画 不论是就业还是做副业赚钱都不错,但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料,给那些想学习 AI绘画 的小伙伴们一点帮助!

图片的插画转绘有很多种不同的风格,今天我们分享另一种制作方法。我们先看一下效果图。

在这里插入图片描述

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
在这里插入图片描述

一. 图片转插画的制作方法

【第一步】:大模型的选择

这里推荐使用:helloFlatArt扁平画风

模型下载地址(文末网盘地址也可获取)

LiblibAI:https://www.liblib.art/modelinfo/920cc4e6516b44b585ad6cc13c9a58f2

【第二步】:提示词的编写

正向提示词格式:(Masterpiece),(Best Quality),flat illustration, + 图片信息

图片信息可以通过WD1.4 标签器标签反推。

正向提示词

Prompt:(Masterpiece),(Best Quality),flat illustration,no humans,scenery,outdoors,house,building

提示词:(杰作),(最佳质量),平面插图,无人,风景,户外,房子,建筑

反向提示词

EasyNegativeV2,nsfw,worst quality,low quality,badhandv4,bad-hands-5,

相关参数设置

  • 采样器:DPM++ 2M Karras

  • 采样迭代步数:28

  • 图片宽高:1024*1024 (和需要转绘的原图片保持一致)

  • 提示词引导系数(CFG):7

【第三步】:Loar模型的设置

lora1: 风景扁平插画丨CJ_illustration

LiblibAI: https://www.liblib.art/modelinfo/8812e0af88824427be453ef3978a564d

该lora模型特别适用于自然风景,人文城市等场景。无需触发词,权重建议0.8。0.7或以下影响扁平化,不过风格也还不错。

这里我们将权重设置为0.8。

【第四步】:ControlNet的设置

ControlNet0: Lineart控制模型用于控制画面线条的一致

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
在这里插入图片描述

相关参数设置如下:

  • 控制类型:选择"Lineart(线稿)"

  • 预处理器:lineart_realistic

  • 模型:control_v11p_sd15_lineart

  • 控制权重:0.65

ControlNet1: Depth控制模型用于控制画面元素远近距离一致

相关参数设置如下:

  • 控制类型:选择"Depth(深度)"

  • 预处理器:depth_zoe

  • 模型:control_v11f1p_sd15_depth

  • 控制权重:1

【第五步】图片的生成

点击【生成】按钮,我们来看一下最终生成的图片效果。

在这里插入图片描述

二. 如何固定颜色

上面制作的图片存在一个问题,就是生成图片的颜色和原图片出入比较大。但是这个要看具体的场景,如果我们想维持图片的颜色也是可以的。只需要再添加一个ControlNet单元。

**ControlNet单元2:**tile控制模型用于控制画面颜色的一致

相关参数设置如下:

  • 控制类型:选择"Tile/Blur(分块/模糊)"

  • 预处理器: tile_colorfix(用于分块固定图片的颜色)

  • 模型:control_v11f1e_sd15_tile

  • 控制权重:0.5 (注意:这里权重一定不要太高)

我们来看一下生成的效果图片。
在这里插入图片描述

三. 相关说明

(1)使用tile控制模型预处理器tile_colorfix用于固定图片的颜色,这里将控制权重设置为0.5,因为权重过大,整个图片呈现的效果会比较差。但是如果权重设置比较小,图片的颜色就比较难以固定。

总体来说,tile模型在图片转绘中的影响比较大,在使用tile模型的时候我们对ControlNet的参数设置尽量多尝试比较。

(2)个人认为,不固定图片的颜色生成的转绘图片效果比固定图片颜色效果好一些,所以在开始的第一部分主要讲不固定图片颜色的制作方式

(3)对于真人转插画的制作来说,个人觉得固定图片的颜色是很有必要的,否则转绘的效果和原图片的颜色不一致,图片效果会差很多。

好了,今天的分享就到这里了,希望今天分享的内容对大家有所帮助。

这份完整版的AI绘画全套学习资料已经上传CSDN,朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费
在这里插入图片描述

标签:Diffusion,颜色,AI,模型,插画,风景图片,tile,图片
From: https://blog.csdn.net/ice_99/article/details/142980899

相关文章

  • 24最新AI绘画StableDiffusion模型推荐系列(风格型)
    前言今天,分享几个SDXL的特殊风格模型,这些模型在特定风格下非常出彩,弥补了一些“我已经看腻了AI画图”的情况。这几位作者分享的SDXL模型艺术风格上表现得尤为出色,而且他们都是秉持着开源精神免费分享自己的模型。训练过模型的小伙伴肯定都知道,要收录上万张图片做数据集,已经......
  • 【SD基础】Stable Diffusion 提示词万能公式&插件&词库
    提示词公式对于StableDiffusion来说,提示词(又或者说“关键词”)是输入项,并且输入英文,StableDiffusion只能输入英文并且被AI理解,转换为向量然后进行生成。合适的提示词可以生成你所想要的画面,如果画面不尽人意,那么大概率是提示词的问题,不合适的提示词会被AI曲解,那么这个时候......
  • CogVideoX:Text-to-Video Diffusion Models with An Expert Transformer
    研究背景背景介绍:这篇文章的研究背景是文本到视频模型的快速发展,特别是Transformer架构和扩散模型的应用。早期尝试预训练和扩展Transformer生成视频已经显示出巨大潜力,如CogVideo和Phenaki。扩散模型在多模态生成方面也取得了显著进展,包括视频生成。研究内容:该问题的......
  • Stable diffusion语法
    进阶语法:1、下划线“—”用下划线连接两个单词,表达是一体,是融合的意思,比如:aplateofcoffeecake,这里的咖啡和蛋糕,在生成就是两个独立体,用下滑线连在一起就是咖啡色的蛋糕 aplateofcoffee_cake → 2、控制提示词的生效时间2.1[提示词:0-7数值]FOREST,LOTSOFTR......
  • AI绘画StableDiffusion零基础入门,轻松制作你的赛博Coser,SD图生图全网最强指南
    AI绘画因“赛博Coser”事件大规模破圈,以前只在二次元中存在的角色变成栩栩如生的真人跃出画面,你是否好奇这些老婆们是怎么画出来的?缘起:赛博Coser事件AI绘画第一次大规模破圈源于早前科技博主“勘云工造”使用AI技术创作的一系列作品。他训练的“赛博Coser”......
  • AI绘画StableDiffusion神级插件InstantID炸裂!只需要一张图就可以换脸,AI换脸详细教程
    这是一套0基础入门的AI绘画系列课程,不需要任何基础!涉及全面:环境搭建、基础篇、进阶篇、应用篇、模型篇以及行业解决方案篇课程制作不易,爱学习的你一定不要忘了订阅关注哦~~最近AI换脸又火起来了,小红书InstantX团队发布了一款最新的换脸技术InstantID和之前的主流......
  • AI绘画StableDIffusion教程!如何利用SDWebUI将图片变得更清晰?全方位对比4种放大方法
    文章目录1、引言2、插件下载和安装3、UltimateSDUpscale(终极SD放大法)4、ControlNettileupscale(瓦片放大法)5、总结零基础AI绘画学习资源介绍......
  • AI绘画StableDiffusion零基础入门—文生图:全面解析AI绘画中提示词的妙用和各种语法,Pro
    AI绘画的一个必不可少的环节就是告诉AI描述画面的Prompt(提示词),但是这种很长很乱、穿插着各种奇怪的数字符号、高深莫测的提示词,究竟在说着什么?难道真的是咒语吗?魔法?咒语?你绝对不曾想到,有生之年竟然能迎来这么一个奇迹时代:画画竟然还能用魔法,岂不是只要会念咒、人人都......
  • AI绘画SD零基础入门到精通教程,新手小白AI扫盲教程,一文搞懂MIdjourney和StableDiffusio
    大家好,我是强哥Midjourney是目前全网最强大的AI绘画平台,用户只需要简单地输入关键词描述,就能获得多幅风格各异的绘画作品,无需任何专业的绘画技能,即刻拥有让人惊叹的艺术创造力。在MidjourneyV5版本之前,用户可以享受免费使用额度,只需要注册一个账户即可在线体验AI绘画。......
  • FLUX.1-dev-LoRA 混合现实与插画风格模型,生成你的卡通旅游照片
     FLUX.1-dev-LoRA是一个混合现实与插画风格模型。该模型可以生成融合了现实与插画元素的图像。它基于FLUX.1-dev基础模型进行训练,特别擅长生成前景角色为插画风格,而背景为现实风格的视觉效果。可以通过使用该模型生成图片并发布在社交平台上,如微信朋友圈或小红书,达到不露脸但......