首页 > 其他分享 >Stable Diffusion——涂鸦幻变:稳态扩散下的艺术重生

Stable Diffusion——涂鸦幻变:稳态扩散下的艺术重生

时间:2024-07-18 12:26:33浏览次数:12  
标签:Diffusion 蒙版 涂鸦 模型 幻变 区域 图像 重绘

目录

引言

在深入体验了 Stable Diffusion 图生图的无限魅力之后,我们不禁为其强大的图像修复和细节丰富能力所折服。然而,在实际应用中,许多用户发现难以精准掌控最终效果的丰富度和细节层次,以达到心中理想的艺术效果。为此,本期内容将带领大家一探 Stable Diffusion 的涂鸦幻变——稳态扩散下的艺术重生,揭示如何在保持图像原有风格的同时,注入新的创意与活力。

Stable Diffusion 的涂鸦幻变技术,巧妙地将用户的涂鸦草图转化为栩栩如生的艺术作品。这一过程不仅保留了原图的精髓,还巧妙地融合了新的元素,使得图像在稳态扩散的过程中焕发出新的生命。通过对模型细致入微的调整和优化,我们能够更好地引导扩散过程,实现从简单线条到复杂纹理的完美过渡,让每一幅作品都独一无二,充满艺术气息。

image-20240718004624840

而这一切的实现,离不开好易智算平台的大力支持。“好易智算” 平台以其稳定高效的计算能力,为 Stable Diffusion 的涂鸦幻变提供了强有力的技术保障。平台不仅拥有业界领先的硬件配置,更以其专业的服务团队和人性化的操作界面,为用户提供了极致的体验。在好易智算平台的助力下,即便是复杂的图像处理任务也能轻松应对,让每一位用户都能在短时间内掌握这一先进技术,实现艺术创作的无限可能。
image-20240718004642100

通过好易智算平台,我们不仅能够享受到 Stable Diffusion 带来的涂鸦幻变,还能在平台的 399 包月活动中,以超值的价格体验到顶级算力的便捷与高效。现在就加入我们,一起在好易智算平台的稳定算力支持下,探索 Stable Diffusion 的艺术重生之旅,开启属于您的创意新篇章!

操作过程

首先我们打开好易智算平台,我们选择 Stable Diffusion,打开之后

image-20240718004821928

image-20240718004831125

image-20240718004843165

我们可以先生成一个图像,为后续做准备

例如:
正向词:

(masterpiece:1.3),ultra-detailed,Best quality,A small yellow duck wearing a hat and a small white duck wearing a bow on his neck chat face to face,cartoon cute,cream tone,HD,Two cute little ducks,Cute little duck,laughing happily. A few little butterflies stopped by her side. There is a willow tree and bushes outside the window. cartoon illustration,

反向词:

(worst quality, low quality:1.4),(depth of field, blurry:1.2),(greyscale, monochrome:1.1),3D face,cropped,lowres,text,(nsfw:1.3),(worst quality:2),(low quality:2),(normal quality:2),normal quality,((grayscale)),skin spots,acnes,skin blemishes,age spot,(ugly:1.331),(duplicate:1.331),(morbid:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5),blurry,(bad anatomy:1.21),(bad proportions:1.331),extra limbs,(disfigured:1.331),(missing arms:1.331),(extra legs:1.331),(fused fingers:1.61051),(too many fingers:1.61051),(unclear eyes:1.331),lowers,bad hands,missing fingers,extra digit,bad hands,missing fingers,(((extra arms and legs))),

我们和可以很快地得到一张:

image-20240718004924622

首先呢我们可以选择手的位置进行一下重绘;

image-20240718004948165

这样的话整体就正常了不少了,我们这里可以了解一些参数:

image-20240718005001872

  1. 蒙版边缘模糊度(Mask Edge Blurring):
    • 这个参数控制蒙版边缘的过渡区域,使蒙版边缘与图像的其他部分更平滑地融合。
    • 在 Stable Diffusion 中,增加蒙版边缘模糊度可以减少修复区域与原始图像之间的锐利边缘,从而产生更自然的过渡效果。
    • 如果设置为较低的值,修复的边缘会显得更清晰;如果设置为较高的值,边缘会更加柔和。
  2. 蒙版模式(Mask Mode):
    • 这个选项决定了模型是应该修复蒙版覆盖的区域还是蒙版外的区域。
    • “重绘蒙版内容” 表示模型将会生成新的内容来填充蒙版覆盖的区域。
    • “重绘非蒙版内容” 则表示模型会重新生成除了蒙版覆盖区域以外的所有内容。
  3. 蒙版区域内处理(Mask Area Processing):
    • 在 Stable Diffusion 的图生图(inpainting)功能中,蒙版区域内处理(Mask Area Processing)的选项对于最终生成图像的质量和真实感有着重要影响。以下是各个选项的详细解释和拓展:
  • 填充(Fill):

    • 当选择 “填充” 时,模型会根据蒙版区域外的图像内容来生成新的像素填充到蒙版区域内。

    • 这通常用于去除图像中的不想要的对象或瑕疵,并替换为与周围环境相匹配的内容。

    • 用户可能需要多次尝试,调整其他参数来获得最佳的填充效果,确保新生成的内容与原图的纹理、颜色和光照相匹配。

  • 原版(Original):

    • 选择 “原版” 意味着蒙版区域内的原始图像内容将被保留,不会进行任何修改。
    • 这个选项在用户只想对蒙版外的区域进行编辑时非常有用,比如在保持原始对象不变的情况下,改变背景或环境。
  • 潜空间噪声(Latent Space Noise):

    • “潜空间噪声” 选项在蒙版区域内添加随机噪声,这种噪声是在模型学习到的图像潜在表示空间中添加的。
    • 添加潜空间噪声可以帮助模型在修复区域时产生更自然的纹理和细节,因为它为模型提供了更多的信息来 “引导” 生成过程。
    • 这种方法对于修复那些需要与周围图像保持一致纹理的较小区域特别有效。
  • 空白潜空间(Blank Latent Space):

    • 选择 “空白潜空间” 会将蒙版区域内的内容设置为空白,即没有任何信息。
    • 这相当于告诉模型该区域完全没有任何内容,需要从头开始生成。
    • 这种方法在蒙版区域较大或需要完全替换原有内容时比较有用,但可能需要更精确的蒙版和更细致的参数调整来避免生成内容与原图不匹配的情况。
  • 重绘区域(Redraw Area):

    • 这个选项允许用户选择是整个图像都要重新生成,还是只生成蒙版覆盖的区域。
    • “整张图片”:整个图像都将被重新生成,考虑蒙版区域的变化。
    • “仅蒙版区域”:只有蒙版覆盖的区域会被重新生成,其他部分保持不变。
  • 仅蒙版区域下边缘预留像素(Edge Padding for Mask Area):

    • 当选择 “仅蒙版区域” 进行重绘时,这个参数可以在蒙版边缘添加额外的像素区域,以帮助模型更好地理解上下文。
    • 这样可以减少在蒙版边缘可能出现的伪影,使生成的图像与原始图像更自然地融合。
  • Soft Inpainting:

    • 这是一个复选框,启用后可以使得修复过程更加平滑和自然。
    • 它通常用于减少在蒙版边缘的硬边和伪影,使得修复后的区域与原始图像更加无缝对接。

我们感觉重新画的手部,有点突兀,我们也可以删掉,例如:
image-20240718005259629

image-20240718005310051

我们只需要稍加提示词即可,

(white fluff:1.2),

我想要小鸭子头上顶一朵小黄花和女孩对应
image-20240718005346163

效果也非常不错

image-20240718005444007

再给女孩带一个金黄色的项链

image-20240718005503442

我们采用了涂鸦重绘技术,细致入微地丰富了图像的细节层次,实现了图像的焕然一新,仿佛赋予了它们第二次生命。在这一过程中,好易智算平台提供了强大而稳定的算力支持与高速的运行环境,使大家能够完全忽略个人电脑配置的限制,享受到无比流畅的创作体验。正是得益于好易智算平台的卓越性能,我们才能确保整个工作流程的连贯性和高效性,为图像处理和艺术创作带来了前所未有的便捷。
在这里插入图片描述

不仅如此,此次好易智算平台推出的 399 包月活动可谓是诚意满满,为用户带来了前所未有的超值体验。仅需 399 元,您就能享受到整整一个月的高品质算力服务,这不仅大幅降低了高端计算资源的门槛,也让更多创意工作者和科技爱好者能够轻松接触和体验顶级算力的魅力。通过这次活动,我们极大地拉近了用户与搭载 4090d 显卡的顶尖计算设备之间的距离,让每个人都能够以更加亲民的价格,感受到前沿科技带来的高效与便捷。
此外,这次包月活动不仅提供了强大的算力支持,还伴随着全方位的技术保障和贴心服务,确保用户在享受高速计算的同时,也能拥有稳定可靠的使用体验。无论是进行复杂的图像处理、深度学习训练,还是其他高性能计算需求,好易智算平台都能为您提供强有力的支持,助您在专业领域取得更大的成就。不容错过的 399 包月活动,正等待着您的加入,让我们一起开启高效计算的新篇章!
image-20240718013327961

我们总结上述的一写操作其实我们可以把涂鸦重绘可以归纳为这么几步

图片准备

在涂鸦重绘流程的初始阶段,图片准备至关重要。这包括:

  • 选择或创作涂鸦:根据需求选择一幅现有的涂鸦作品,或者自己创作一幅新的涂鸦。

  • 图像格式与大小调整:确保图像格式兼容,并对图像大小进行调整,以适应模型的输入要求。

  • 清洁与预处理:去除图像上的污点、杂点等,确保涂鸦线条清晰,便于后续处理。

我们可以多生成几张图片我们选择一张最优质的

image-20240718013403483

创建蒙版

蒙版是涂鸦重绘中的关键工具,用于指定需要重绘的区域。

  • 蒙版设计:使用图像编辑软件绘制蒙版,精确标记出需要模型重绘的区域。

  • 蒙版优化:调整蒙版边缘,使其与涂鸦内容自然过渡,避免生硬的边缘。

image-20240718013422418

图生图优化

在正式进行重绘之前,对图生图过程进行优化是必要的。

  • 分析原图风格:理解涂鸦的风格特点,以便在重绘时保持一致性。

  • 预测试:进行小范围的测试,以评估模型对涂鸦的理解和重绘效果。

image-20240718013509933

设置参数

参数设置直接影响着重绘的效果,需要细心调整。

  • 模型参数:根据涂鸦的特点和用户需求,设置模型参数,如蒙版模式、重绘区域等。

  • 风格参数:调整风格相关的参数,确保重绘内容与原图风格匹配。

涂鸦重绘丰富内容
这一步是涂鸦重绘的核心,涉及模型的实际运行。

  • 运行模型:将涂鸦和蒙版输入模型,启动重绘过程。

  • 监控生成:实时监控生成过程,捕捉模型对涂鸦内容的理解和转换。

细节调整

重绘完成后,细节调整是提升作品质量的关键。

  • 颜色校正:调整颜色平衡,使重绘区域与原图颜色协调。
  • 纹理与细节增强:对重绘区域进行纹理和细节上的增强,使其更加逼真。
  • 对比度与亮度调整:优化图像的对比度和亮度,使整体视觉效果更加和谐。
  • 去除伪影:检查并去除可能出现的伪影或异常,确保图像的自然流畅。

总结

通过以上的操作流程,我们不仅见证了涂鸦重绘技术的强大力量,也深切体会到了它在艺术创作中的独特优势。涂鸦重绘不仅能够将简单的线条和草图转化为栩栩如生的艺术作品,还能够保持原有作品的风格和韵味,同时注入新的创意和细节,使得每一幅作品都焕发出新的生命力和艺术魅力。

好易智算平台在这一过程中扮演了不可或缺的角色。它不仅提供了稳定高效的计算支持,使得复杂的图像处理任务变得轻松可行,还以其人性化的操作界面和专业服务团队,极大地降低了技术门槛,让更多用户能够轻松掌握并应用这一先进技术。好易智算平台的 399 包月活动,更是将高端计算资源带入寻常百姓家,让每一位创意工作者和科技爱好者都能以亲民的价格,享受到顶级算力带来的高效与便捷。

涂鸦重绘技术的出现,不仅丰富了艺术创作的表现形式,也为我们提供了无限的可能性。而好易智算平台,作为这一技术的强大支撑,无疑为我们的创意之旅插上了翅膀,让我们在艺术创作的天空中自由翱翔。未来,随着技术的不断进步和平台的不断完善,我们有理由相信,更多的艺术奇迹将在好易智算平台上诞生,为我们带来更多的惊喜和感动。

image-20240718013618319

标签:Diffusion,蒙版,涂鸦,模型,幻变,区域,图像,重绘
From: https://blog.csdn.net/weixin_44976692/article/details/140514987

相关文章

  • Stable Diffusion新手快速入门教程
    关于Ai绘画,很多人在体验了Midjourney(以下简称MJ)之后,发现它创意能力很强,但可控性比较弱,不便应用,于是转向StableDiffussion(以下简称SD),但又发现SD貌似很复杂。我在后台收得比较多的留言,都是一些很基础的问题咨询,这是这篇文章的写作背景。Ai绘画的算法工具,如果要做一个不一定......
  • Stable Diffusion 模型推荐,干货满满,建议收藏!
    最近有很多小伙伴说,刚接触StableDiffusion想尝试AI绘图,但是打开C站面对这么多的模型不知道从何下手,而且模型内存还不小,外网下载速度也慢,一旦选择的模型不符合需求,就需要重新挑选和下载,折腾着一天的时间就过去了,不但丹没炼成,购买的梯子套餐反而没了。那么接下来,我将通过自......
  • StableDiffusion 安装部署教程,轻松上手无压力!(附2024最新SD安装包)
    亲爱的小伙伴们,大家好!今天要给大家分享一个超级实用的SD安装教程,让您轻松开启新的体验之旅!一、SD简介SD是一款功能强大且备受欢迎的软件/工具,它具有的以下功能和优势,能够为您的工作、学习和娱乐带来极大的便利。功能:1.文生图创作-根据输入的文本描述生成逼真或......
  • AIGC教程:如何使用Stable Diffusion生成B 端图标(附安装包)
    在日常工作中,设计师在应对运营和UI设计的B端图标时,常常面临大量的构思、制作和渲染等工作,耗时耗力。我们可以利用StableDiffusion(以下简称SD)结合AI的方式,帮助设计师优化图标的设计流程,使任何对这一领域感兴趣的人都能尝试并创作出多样化的图标设计,灵活高效运用在项目之中......
  • Stable Diffusion - 光影魔法,SD中的光影控制(附模型)
    今天继续分享SD中光影控制的运用和效果。光影控制体验—这次介绍的光影控制效果如下:autumnlights:秋天光景,街景与人物服装也会变成秋装springlights:春天光景,街景与人物服装也会变成春装summerlights:夏天光景,街景与人物服装也会变成夏装winterlights:冬天光景,街......
  • Stable Diffusion【2.5D模型】:质感细腻&背景逼真,2.5D人物效果大模型AgainMixSDXL
    今天和大家分享一个基于SDXL的2.5D人物效果大模型:AgainMixSDXL。最新版C2是7月6号才更新,在最新版作者融入了sdxl_lightning_4step_lora,可以更快速生成图片。在Liblib官网作者对该模型的介绍比较少,主要是相关参数推荐设置。个人体验下来,感觉美女出图质感很不错,图片的背景元......
  • AI绘画Stable Diffusion 零基础入门 —AI 绘画原理与工具介绍,万字解析AI绘画的使用教
    大家好,我是设计师阿威想要入门AI绘画,首先需要了解它的原理是什么样的。其实很早就已经有人基于深度学习模型展开了对图像生成的研究了,但在那时,生成的图像分辨率和内容都非常抽象。直到近两年,AI产出的图像内容的质量变高、而且有一定的艺术价值,这时它才算正式拥有了理......
  • AI绘画Stable Diffusion教程,6种提示词角度!精准实现你的 stable diffusion 创作意图!
    1、引言本期内容的核心目标是向你展示构图、风格、媒介、画面清晰度、灯光效果以及颜色氛围等6大类别中的常用标签(tags),这些标签将为你提供更深入的理解,并帮助你更有效地编写提示词(prompt)。这些标签可以大大影响AI绘图模型生成的图片内容,掌握好它们的使用,将有助于你在AI绘......
  • 如何使用AI绘画工具stable diffusion填充画外内容?保姆级教程建议收藏!
    大家好,我是设计师阿威当我们尝试绘制高分辨率的图片时,传统的SD模型常常会遇到诸多问题,例如元素重复、显存不足和生成时间过长等。但如果只绘制低分辨率的图片,却很难生成丰富的画面元素和细节。我们可以借助outpaint来解决这个问题。Outpaint可以简单地理解为绘制画外内容,......
  • 【周末闲谈】Stable Diffusion会魔法的绘画师
    个人主页:【......