首页 > 其他分享 >AI绘画Stable Diffusion ,3种方法精确控制人物姿势,总有一种适合你

AI绘画Stable Diffusion ,3种方法精确控制人物姿势,总有一种适合你

时间:2024-07-18 14:28:49浏览次数:13  
标签:Diffusion 姿势 人物 骨骼 AI AIGC 编辑器 Stable OpenPose

前言

在AI绘画软件 stable diffusion 中,控制人物姿势的方法有很多,最简单的方法是在提示词中加入动作提示词,比如Sit, walk, run(坐、走、跑)等,但如果想要精确控制人物姿势就比较难了,首先想要用语言精确描述一个姿势比较困难,另外stable diffusion生图姿势图就像抽盲盒一样具体有一定的随机性。今天跟大家介绍几个常用的精确控制人物姿势的方法。

1、ControlNt 中的 OpenPose

ControlNt 是 stable diffusion中功能非常强大,也是非常重要的一个插件,用它的OpenPose可以很容易做到控制人物姿态。首先,我们需要准备一些人物姿势图片。这些人物姿势图可以自己拍摄,也可以从网上下载。
这里提供一个下载方法:请看文末扫描获取Openpose八百张骨骼姿势图

在这里插入图片描述

有了pose参考图后,我们用提示词生成一张小姐姐图片(见下图)然后以这张图片为例,将人物姿势应用到这张小姐姐图片上。

打开 ControlNet,将姿势参考图片拖入参考图片内,按下图红框内的提示,勾选启用,预处理和模型都选择OpenPose,最后注意尺寸要和原图尺寸保持一致。

生成的小姐姐图片很漂亮,姿势和参考图一致,但 stable diffusion 出全身图容易出现脸部变形和坏手的情况,这是一件很让人讨厌的事情,下面我们来解决坏手这个问题。

在使用 OpenPose时会自动生成一张骨骼图,我们需要把这张骨骼图保存下来。

在深度图编辑器(这是一个插件,具体安装方法下面会介绍)中导入刚刚的骨骼图,加入两个手势,然后导出手势图。注意图片尺寸要和原图一致。

回到ControlNet中,到第二个栏位(下图红色框内),拖入刚刚的的手势图,预处理不选,模型选择dpth(深度图),注意尺寸要和原图一致。然后点击生成。

看下结果,好像解决得还是不太完美,这个过程需要大家仔细耐心的调整,我在这里就不浪费时间了。

2、用OpenPose editor(OpenPose编辑器)控制人物姿势

首先说下OpenPose editor 和上文提到的 Openpose hand(深度编辑器)的安装方法:

打开扩展,从网址安装,然后分别输入下图中的网址,点击安装即可。

当看到提示“Installed into D:\AI\stable-diffusion-webui\extensions\openpose-editor. Use Installed tab to restart.”重新启动stable diffusion,OpenPose编辑器和深度编辑器就安装好了。

重启webui后,会发现菜单栏上面有多了OpenPose编辑器和深度编辑器,打开OpenPose编辑器,会发现一个骨骼小人。

在这里插入图片描述

这个骨骼是可以自己用鼠标手工调整的,但容易调变形,让身体产生畸形,你也可以载入一张背景图做为参照进行调整,调整好后的骨骼图导入ControlNet中即可。

人物姿势基本是按照我摆好的骨骼生成的,不过这姿势有些丑,这是我没调整好姿势的原因,另外就是生成了坏手。解决坏手可以按照上面说到的配合深度图编辑器来解决,也可以用我下面的方法来解决。

3、用 3D Openpose editor精确控制人物姿势,一并解决坏手问题

3D Openpose editor 是一个中国小哥开发的网站,连使用界面都是中文的。

3D Openpose editor 允许用户自己调整人物骨骼姿势,也可以随机生成,还可以通过图片识别人物姿势,待调整好姿势后,点击生成,分别保存人物骨骼图和手部深度图,导入 ControlNet 中使用即可。注意这里要事先调整好宽高比例。

在这里插入图片描述

两张图片放置的位置和设置见下图。

人物的姿势是按照我们设置的骨骼图生成的,人手虽然稍微好了一些,但还是有些变形,这个需要我们耐心调整手部骨骼的深度图,需要挑战大家的耐心,这里我就不浪费时间了,需要大家自己去尝试。

如果你喜欢这篇文章,多谢关注、点赞和评论,你的支持是我最大的动力。

写在最后

感兴趣的小伙伴,赠送全套AIGC学习资料,包含AI绘画、AI人工智能等前沿科技教程和软件工具,具体看这里。

AIGC技术的未来发展前景广阔,随着人工智能技术的不断发展,AIGC技术也将不断提高。未来,AIGC技术将在游戏和计算领域得到更广泛的应用,使游戏和计算系统具有更高效、更智能、更灵活的特性。同时,AIGC技术也将与人工智能技术紧密结合,在更多的领域得到广泛应用,对程序员来说影响至关重要。未来,AIGC技术将继续得到提高,同时也将与人工智能技术紧密结合,在更多的领域得到广泛应用。

在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照下面的知识点去找对应的学习资源,保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了,安装就可直接上手!
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础,有自己的理解能力的时候,会去阅读一些前辈整理的书籍或者手写的笔记资料,这些笔记详细记载了他们对一些技术点的理解,这些理解是比较独到,可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频,看视频学习是最快捷也是最有效果的方式,跟着视频中老师的思路,从基础到深入,还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅,要学会跟着视频一起敲,要动手实操,才能将自己的所学运用到实际当中去,这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权,请联系删除

标签:Diffusion,姿势,人物,骨骼,AI,AIGC,编辑器,Stable,OpenPose
From: https://blog.csdn.net/A13531922962/article/details/140496510

相关文章

  • Stable Diffusion【进阶篇】:真人漫改之图生图实现
    所谓真人漫改,就是把一张真人的图片生成一张新的二次元的图片,在StableDiffusion中,有很多方式实现,其中通过图生图的方式是最常用的方式,大概1-3分钟就可以完成。本文我们系统的讲解一下。下面我们来详细看一下图生图实现真人漫改的具体实现方式。【第一步】:图生图图片上......
  • stable diffusion教程:固定同套衣服,一秒快速换脸
    哈喽今天教大家用sd,做封面上的圣斗士女郎。文章使用的AI工具SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了,无需自行查找,有需要的小伙伴下方扫码自行获取。昨天一位网友私信我,让我用这张圣斗士铠甲,画几个美女壁纸。特别强调铠甲不能变。......
  • AI绘画Stable Diffusion常用插件合集
    StableDiffusion常用插件,我已经给大家整理好了,下方扫码自取就好。拥有这些SD常用插件,让您的图像生成和编辑过程更加强大、直观、多样化。以下插件集成了一系列增强功能,覆盖从自动补全提示词到高分辨率图像放大,从双语界面到无边图像浏览,为用户提供了无缝的StableDiffusi......
  • AI绘画小白福音!Stable Diffusion 保姆级教程
    大家好,今天,我们就来进行AI绘画的文生图实战。(文末附籽料)unsetunset文生图实战unsetunset模型安装后之后,就可以开始激动人心的AI文生图了,下面我们以文生图为例,一边操作一边讲解提示词的语法和分类,以及出图参数的作用和使用方法。在开始之前,我们再来回顾一下,我们的需求......
  • Stable Diffusion【进阶篇】:真人漫改之IP-Adapter实现
    大家好,今天我分享真人漫改实现方式:借助ControlNet的IP-Adapter控制模型,IP-Adapter控制模型是由腾讯研究院出品的一个新的ControlNet模型,关于该模型可以理解为图片提示词,类似于MD垫图的效果,但是比tagger标签器提取出图片的元素构成效果更好。它不仅参考图片的风格、光影特效......
  • 人工智能AI已经在改变职场
    如果说无人驾驶出租车现在还是人们口中的傻子,来看看AI绘画后相关职场的故事。AI入侵占到一个行业的大部分,并不遥远,也不缓慢。AI的影响力不仅仅局限于游戏美术领域,也将影响客服、文秘和其他行业。AI绘画工具国际劳工组织(ILO)的研究表明,人工智能(AI)正在悄然改变着全球的就业......
  • AI绘画可以通过这四种方式盈利变现
    市场上涌现出许多利用AI绘画吸引用户并实现盈利的方式。相信很多朋友已经有所耳闻,然而如何将其转化为真金白银却令人摸不着头脑。今天,我们将为大家详细揭示这个项目的操作秘籍,它具备低门槛、简单易行、变现潜力无限的特点,就像是为你奉上一个赚钱的锦囊妙计。一、什么是AI......
  • Stable Diffusion ControlNet垫图:IP-Adapter实现图片风格迁移
    IP-Adapter实现的SD垫图功能对我们的图片处理非常有用,后面我们会进行一系列IP-Adapter的应用分享,通过具体的实例真正看到IP-Adapter的强大。文章使用的AI工具SD整合包、各种模型插件、提示词、AI人工智能学习资料都已经打包好放在网盘中了,无需自行查找,有需要的小伙伴下方扫......
  • AI绘画赚钱的机会多到你无法想象
    所有的AI设计工具,模型和插件,都已经整理好了,下方扫码即可免费获取噢~家人们,AI绘画带来的变现方式真的太多了!我们圈内目前更新的AI绘画赚钱信息差,已经累计330条!而且每天都在挖掘2-10条最新最火的蓝海项目。很多人会认为AI还没有落地,也有很多人认为这些宣扬AI红利的自媒体......
  • Stable Diffusion|IP-Adapter 图片风格迁移
    文末扫码可获取IP-Adapter插件!前段时间腾讯发布了一个新的ControlNet模型叫“IP-Adapter”,它的作用就是把上传的图像转化为图像提示词,简单的来说就是跟Midjourney的垫图功能差不多。IP-Adapter能够精准地识别参考图的风格特征,并且可以很好的适配其他的模型以及ControlNet......