首页 > 其他分享 >AI绘画Stable Diffusion:ControlNet组件—Scribble(涂鸦)赋予用户精细控制权,让涂鸦草图焕发生命力

AI绘画Stable Diffusion:ControlNet组件—Scribble(涂鸦)赋予用户精细控制权,让涂鸦草图焕发生命力

时间:2024-07-08 11:27:39浏览次数:11  
标签:Diffusion 涂鸦 AIGC ControlNet xDoG HED Scribble

大家好,我是画画的小强

今天给大家分享一下AI绘画Stable Diffusion当中的:ControlNet Scribble组件,**Scribble(涂鸦)**技术是一种能够为用户提供独特的手动注释或标记图像(如:涂鸦、简笔画等)的方法技术,可被用来引导SD图像生成过程。

ControlNet Scribble简介

ControlNet Scribble插件允许用户通过直接在图像上绘制或涂鸦,指定希望在生成输出中看到的修改、编辑或属性等方法。通过使用ControlNet Scribble插件,用户可以对生成的图像拥有更精细的控制权。模型会考虑标记区域或注释,并将其作为额外的指导来影响SD绘图生成的输出。该插件使得用户能够在AIGC绘图过程中,参与到绘图结果塑造,并根据个人喜好进行输出定制。

ControlNet Scribble体验

ControlNet面板中可以选择Scribble(涂鸦),可以看出包括包含Scribble HEDScribble PidinetScribble xDoG多个可用选项。下面我们就正式开始Scribble体验之旅。

以下体验使用模型配置为:

  • 绘图模型:**AWPortrait(1.5)、墨幽人造人XL模型(SDXL)

  • 迭代步数:30

  • CFG:7

  • 分辨率:1024*1024

  • 启用adetailer修复手和脸。

本文中涉及模型下载请看下方扫描即可免费获取哦

  • 墨幽人造人XL模型

  • AWPortrait

  • controlnet-scribble-sdxl-1.0:

  • control_v11p_sd15_scribble:

01:Scribble HED

Scribble HED是利用整体嵌套边缘检测(HED)的技术方法,该预处理器擅长生成与技艺精湛的艺术家手绘相媲美的轮廓ControlNet Scribble HED 能够使用HED重新上色和重新风格化图像,赋予图像独特的艺术风格。

1girl,simple background,Turn your back on the audience, half backless, hand covering,shadow killer, dress

Scribble配置

输出效果

02:Scribble Pidinet

Pixel Difference网络(Pidinet)处理图像清晰的曲线和直线边缘主要工具。凭借其检测和强调清晰线条的能力,Pidinet能够赋予艺术作品精致的外观,同时能够保留必要的细节质量。Scribble Pidinet 非常适合捕捉物体轮廓或其他复杂的形状,而不会过于复杂

Scribble配置

输出效果

03:Scribble xDoG

Scribble xDoG是使用差分高斯(xDoG)一种优秀的边缘检测技术。通过调整xDoG阈值,使得用户有能力控制艺术作品中的细节层次。Scribble xDoG预处理器能够处理细节层次中找到完美的平衡,创造出展示恰到好处细节的高质量涂鸦。

Scribble配置

输出效果

从上面对比能够看出这几个预处理之间存在一些细微的差异,主要在预处理器采样线条精细和轮廓。笔者平时使用Pidinet较多,这看人习惯。

04:SDXL Scribble

这里特别说明使用的模型为SDXL模型:墨幽人造人XL模型 。另外最新的SDXL Scribble 已经发布,SDXL版本Controlnet工具箱又多了一个利器。下载地址为:https://huggingface.co/xinsir/controlnet-scribble-sdxl-1.0

Scribble配置

输出效果

更多Scribble案例体验

01.广告-草莓

masterpiece photo, beautiful girl, detailed face, model shot, romantic, perfect skin, realistic, surprise,

Scribble配置

输出效果

02.泳池

masterpiece,best quality,highly detailed,1 girl,chinese girl, big blue swimming pool,fair and smooth skin

Scribble配置

输出效果

03. 花季

1girl,solo, masterpiece photo, beautiful girl, detailed face, model shot, romantic, perfect skin, realistic, surprise,

Scribble配置

输出效果

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权,请联系删除

标签:Diffusion,涂鸦,AIGC,ControlNet,xDoG,HED,Scribble
From: https://blog.csdn.net/A1353192296/article/details/140261357

相关文章

  • AI绘画Stable Diffusion【图生图教程】:图片高清修复的三种方案详解,你一定能用上!(附资料
    大家好,我是画画的小强今天给大家分享一下用AI绘画StableDiffusion进行高清修复(Hi-ResFix),这是用于提升图像分辨率和细节的技术。在生成图像时,初始的低分辨率图像会通过放大算法和细节增强技术被转换为高分辨率版本。这种方法能够显著提高图像的清晰度和视觉效果,特别适用......
  • Diffusion Model
    介绍DiddusionModel是2020年出现的一种新模型,论文中将其用于生成任务中。与GAN模型不同的是,他不需要使用判别器来进行训练。其训练过程与通常的生成器有很大的不同,他并不是直接训练一个生产模型,而是训练一个正态分布,并使用其对原始噪声图片去噪来生成图片。至于如何为什么使用......
  • ComfyUI预处理器ControlNet简单介绍与使用(附件工作流)
    简介ControlNet是一个很强的插件,提供了很多种图片的控制方式,有的可以控制画面的结构,有的可以控制人物的姿势,还有的可以控制图片的画风,这对于提高AI绘画的质量特别有用。接下来就演示几种热门常用的控制方式1.OpenPose(姿态控制预处理器)姿态控制预处理器可以根据提供的图......
  • Advanced Generative Models (Diffusion)
    ......
  • AI绘画Stable Diffusion画全身图总是人脸扭曲?ADetailer插件实现一键解决!
    大家好,我是向阳你是否遇到过SD生成的人物脸部扭曲、甚至令人恶心的情况?也曾感到束手无策?别担心,这份教程专为你而来。在使用SD生成人物全身照时,你可能经常发现人物的脸部会出现扭曲问题。这是因为人物面部像素占比过少,导致无法充分还原面部信息。解决这个问题的常见方法是使......
  • 用StabilityMatrix一键安装Stable Diffusion
    StableDiffusion是2022年发布的深度学习文字到图像生成模型,它既能免费使用,又能部署在本地端,又有非常多的模型可以直接套用,在使用体验上比Midjourney和DALL-E更加强大。StableDiffusion使用的模型有下列几大类,对照模型网站https://civitai.com以形成更直观的认识:BaseModel:Sta......
  • 用 stable diffusion 做图文女装号,开启你的带货之旅!!
    对于很多入门级的新人来说,很想做副业,但是会遇见各种各样的问题,比如不会写文案,不会拍摄视频,不会剪辑视频,不会二次创作,导致没有原创的作品,直接搬运没有流量等,基于这些原因,很多人都只是观望,过段时间后又该干啥干啥了。图文带货目前在各大平台都很火,不管是小红书,抖音还是视频号......
  • 【Stable Diffusion】2个实用方法---去除AI绘画的油腻感
    虽然现在AI绘画的技术已经相对比较成熟,能做出很多以假乱真的照片,但AI绘画似乎还是有点“人工”的“油腻感”。本文想讨论一下,降低AI绘画“油腻感”的方法。AI的油腻感?Midjourney的V6版本,虽然已经能产出媲美“专业摄影”效果的图片,但还是有一股“AI味”。当然,这......
  • 扩散几何(Diffusion Geometry)
    扩散几何(DiffusionGeometry)是一种用于分析和处理高维数据的几何方法。它利用数据的局部结构来推断和捕捉全局几何信息,通过定义和计算数据点之间的扩散距离或扩散度量,来揭示数据的内在几何结构和相关性。扩散几何的核心思想是基于扩散过程和随机游走理论,常用于降维、数据分类、聚......
  • Diffusion综述阅读笔记
    扩散模型综述生成模型大观生成模型的本质是在学习数据的概率分布。如果将它想象成包括一个潜在变量\(z\)的联合分布模型,通过积分的形式来表示这一分布(边际似然)如下:\[P_\theta(x)=\int_zP_\theta(x,z)dz=\int_zP(z)P_\theta(x|z)dz\]其中,\(P(......