首页 > 其他分享 >爆火AI美女跳舞制作全流程-SD插件Ebsynth_Utility(附带所有工具包)

爆火AI美女跳舞制作全流程-SD插件Ebsynth_Utility(附带所有工具包)

时间:2024-05-24 19:25:53浏览次数:14  
标签:关键帧 插件 AI Ebsynth ebs 爆火 重绘 图片

1.基础介绍

AIGC|ChatGPT行业介绍

1.1 SD简介

Stable Diffusion XL 能够生成几乎任何艺术风格的高质量图像,是用来生成写实图像的最佳开放模型。
Stable Diffusion是一个可以和MJ相媲美的AI出图工具,简称SD
它是一个开源的、免费的项目,没有公司在经营,如果你想用,是需要安装到自己电脑上的,用自己的电脑来渲染出图,同时需要很多数据模型来训练这个工具,让它更加智能。
它的优点很明显,免费!除此之外,如果你懂电脑技术,那SD的可定制化会更高,你可以通过训练自己的数据,更好的控制AI出图的构图和姿势。
但劣势也很明显,很小白不够友好,尤其对于电脑并不是那么熟练的小伙伴,简直是噩梦。
这也是我们没有先讲它的原因。
其次,需要部署在自己电脑上出图,需要电脑的配置过关,要不然一运行就卡死!如果自己电脑配置不行,也不用担心,可以使用云服务器来部署。

1.2 本地部署

本地部署,推荐使用网上已经做好的一键安装包。
windows系统:
推荐秋叶的Stable Diffusion整合包,教程及整合包下载地址:
https://www.bilibili.com/video/BV1iM4y1y7oA/
当然,我也给大家做了备份,也可以到我公众号【小新杂谈社】回复AI获取 ,同样可以得到最新的秋叶整合包

2 插件安装

简单的说,AI美女转绘就是把已有的AI美女视频,通过AI绘画转成完全原创的视频。 这项技术同样适用于其他类型的视频。
在转绘中最关键的一步,就是把原视频里的图转成我们自己的图。
效果演示:
在这里插入图片描述

当然这只是一帧图,我们需要用Stable Diffusion把所有关键帧都重绘,最后再合成视频。
下面会一步步讲解。

制作美女转绘基本原理是把原视频逐帧重绘,也就是先把原视频的每一帧抽取成图片, 然后用Stable Diffusion把这些图重绘, 最后把这些重绘的图片合成视频,这样就得到原创视频了。

如果手工操作,这个过程会非常麻烦,幸好有人已经开发了一个Stable Diffusion 插件:ebsynth_Utility,使用这个插件只需要按步骤一步步操作就可以完成整个转绘。

2.1 插件名称:ebsynth_Utility

插件名称:ebsynth_Utility
插件地址:https://github.com/s9roll7/ebsynth_utility
在Stable Diffusion插件管理,直接输入这个地址,安装就可以,如下图:
在这里插入图片描述

2.2 八个步骤

现在可以打开ebs的插件,看一下info选项卡,可以看到一共8步
每一步都有具体说明,接下来我们就按照步骤一步步制作就可以了。
在这里插入图片描述

3 ebs第一步:抽帧

抽帧, 这一步关键是把原视频的每一帧抽取成图片
3.1 填写项目目录
注意,我们所有生成的图片需要有一个目录存储,叫项目目录
我们再ebs插件的第一步配置里,填写这个目录,比如下图中的pp目录地址
当然,右边需要选择第一步
在这里插入图片描述

3.2 上传原视频

在第一步左边的配置里,直接拖拽上传原视频,如下图所示:
在这里插入图片描述

3.3 点击生成

在第一步右侧,直接点击生成,过一会就可以看到结果信息里的完成字样
这样抽帧就完成了
在这里插入图片描述

3.4 抽帧结果

我们回到项目目录pp,发现抽帧之后会新生成一个目录,video_frame
这个目录里的图片就是抽帧的图片,如下图:
在这里插入图片描述

4 ebs第二步:关键帧提取

关键帧提取,在第一步抽帧之后图片非常多,真正的重绘用不了这么多图片
我们只需要抽取核心的关键帧就可以,这样效率会高一些
因此第二步要做关键帧抽取。

4.1 配置

点击ebs插件第二步,在左边配置关键帧间隔等参数。
在右侧选择第二步,点击生成,就可以了。
在这里插入图片描述

4.2 结果

还是在ebs插件,右侧看到了关键帧结果的信息,表示完成了关键帧抽取
在这里插入图片描述

4.3 关键帧图片

注意,回到我们的项目目录pp,此时又生成了一个目录,video_key
这里面的图片就是关键帧,接下来我们重绘这些图片就可以。
在这里插入图片描述

5 ebs第三步:关键帧重绘

关键帧重绘,这一步是整个重绘的核心步骤,里面有很多参数配置
大家要细心一点。
这一步用到的图片就是上一步抽取的关键帧,我们把每张图片重绘后
就达到了原创的目的

5.1 选择SD里的图生图

关键帧目录里的图片还是很多,我们先来重绘一张
配置一下参数,看看效果,如果一张图跑的不错
最后再批量跑。
注意在图生图模块输入正向提示词和反向提示词。
在这里插入图片描述

5.2 上传图片

现在上传一张关键帧图片,随便上传一张即可
在这里插入图片描述

5.3 配置

核心配置,重绘图片其实就是按当前图片重新生成一个原创图
配置采样方法,迭代步数,重绘尺寸
注意重绘尺寸一定要点击这个三角,让他和原图一致。
最后注意重绘幅度参数填0.9,表示重绘幅度很大,这样才能原创。
具体参加下图:
在这里插入图片描述

5.4 配置ControlNet

接下来是核心步骤,配置ControlNet
这一步关键是要控制图片生成,不要脱离原图的姿势
关键信息等等,这样才能保证出来的图和原图一样的优秀
点击启用ControlNet,点击完美模式
具体选项参看下图:
在这里插入图片描述

5.5 点击生成

配置结束直接点击生成,自己看一下出图效果 不满意可以继续调整参数
这个参数没有固定值,每个人要自己调整即可
在这里插入图片描述

5.6 查看日志

核心关键,此时要查看SD的运行日志,保证我们配置里的每一项都运行
不要出现配置了,但是日志里错误,没运行,这样的配置无效。
在这里插入图片描述

5.7 批量处理

全部检查完毕,就可以批量生成了
效率会大大提高。
在这里插入图片描述

5.8 结果

注意重绘之后,项目目录pp里会出现一个新的目录
检查一下,里面都是重绘后的图片
在这里插入图片描述

6 ebs第四步:放大图片

放大图片,这一步非常简单
目的就是把上一步重绘的图,高清放大, 这样才能保证结果完美
直接回到ebs插件,点击第4步就可以
在这里插入图片描述

7 ebs第五步:生成ebs文件

这一步的目的很简单,就是根据之前做好的图片,生成ebs文件
这里的ebs文件是给Ebsynth软件使用的。下一步会详细介绍Ebsynth软件。
这里直接点击第5步生成即可
在这里插入图片描述

8 ebs第六步:运行Ebsynth

又是关键的一步,运行Ebsynth
特别注意这一步操作不在SD的ebs插件操作,要在电脑上运行Ebsynth软件。
重点介绍一下Ebsynth软件:
该软件可以做到按关键帧信息,把视频里的所有图片进行重绘
之前的步骤已经生成了视频所有帧,重绘后的关键帧
此时运行Ebsynth来完成其他帧的重绘
注意:上一步的.ebs只是这个软件的批量处理文件,核心还是那些图片

8.1 打开Ebsynth软件

在自己电脑运行Ebsynth
在这里插入图片描述

8.2 打开ebs文件

用Ebsynth打开上一步生成的ebs文件

在这里插入图片描述

8.3 运行

导入ebs之后,直接点击run ALL就可以运行
在这里插入图片描述

8.4 结果

注意,Ebsynth运行结束应该生成一堆out文件夹
里面存储的是重绘后风格的图片,你一定要仔细检查一下
在这里插入图片描述

9 ebs第七步:生成视频

最后一步,生成视频非常简单,之前的步骤已经把原料准备好了。
现在只需要回到SD的ebs插件,点击第7步,运行即可
在这里插入图片描述

9.1 结果

最后会生成两个视频,如下图, 一个带原视频的声音,另外一个不带,你可以按自己需要选用。
在这里插入图片描述

10 ebs第八步:可选(换背景)

可以跳过这一步。下面我们直接看看成品效果吧(无音乐):
视频:https://www.bilibili.com/video/BV1v34y1c72t/

11 相关资料下载

文中涉及的:Ebsynth软件 ,相关提示词,相关Lora模型及所有AI工具资源和副业学习手册 可以移步公众号【小新杂谈社】 回复 AI 获取
在这里插入图片描述

12 相关资料截图

SD全套安装包以及各种模型安装包
在这里插入图片描述
各大AI工具资源导航
在这里插入图片描述
在这里插入图片描述

副业资料截图
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

AIGC自学资料
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

AI导航小程序在这里插入图片描述

标签:关键帧,插件,AI,Ebsynth,ebs,爆火,重绘,图片
From: https://blog.csdn.net/u014349086/article/details/139097691

相关文章

  • AI产品经理必备的AI技术知识
    第一章:AI产品经理是否需要懂技术及其程度在当今AI行业快速发展的背景下,作为一位AI产品经理,理解并掌握一定的AI技术知识不仅是锦上添花,更是不可或缺的素质。那么,AI产品经理究竟需要懂到何种程度的技术呢?首先,明确一点,AI产品经理并不需要成为算法专家或数据科学家,他们的核心......
  • 小白必看!AI产品经理的机器学习算法入门指南
    之前我们聊过关于人工智能的行业、产品经理的第二曲线以及两个岗位的区别,那这次我们再深入一层——趣解机器学习算法。机器学习算法可能听起来有些高深莫测,我明白很多人包括我一开始都感到头疼,我尽量不用公式,只用案例的形式来呈现,我们从整体到局部逐步深入。01机器学习算......
  • 心识宇宙 x TapData:如何加速落地实时数仓,助力 AI 企业智慧决策
    使用TapData,化繁为简,摆脱手动搭建、维护数据管道的诸多烦扰,轻量代替OGG、DSG等同步工具,「CDC+流处理+数据集成」组合拳,加速仓内数据流转,帮助企业将真正具有业务价值的数据作用到实处,将“实时数仓”方法论落进现实。TapData持续迭代产品能力,优化用户体验的同时,也在不断探......
  • 想转行做大模型?AI产品经理们,先看看这份指南
    如果你想转行做大模型,作为一名AI产品经理,你可以怎么做呢?或许,你可以先进行自我检测,看看自己是否真的适合转行做大模型。这篇文章里,作者便给想转行做大模型的AI产品经理们提出了一些建议,不妨来看看吧。作为一个产品经理,你可能已经熟悉了一些常见的AI技术和应用,比如机器学......
  • AI产品经理究竟是个什么“货色”?
    记得很久以前,程序员就叫程序员,需求就叫需求,美工就叫美工,测试就叫测试,只有管事管人的叫做经理。后来,慢慢衍生出了一个新的角色——一个叫做产品经理但不是经理的角色。于是乎,江湖上便开始有了产品经理的传说。微信的张小龙让产品经理抵达了一个别人无法企及的高度,网上各......
  • 16.await-async 异步
    await/asyncC#中的异步编程|MicrosoftDocsASP.NETCore中的RazorPages和EntityFrameworkCore-第1个教程(共8个)|MicrosoftDocsasync修饰方法,可以单独出现,但是又警告.await在方法体,只能出现在task/async方法前面,只有await会报错.await/async能够用同......
  • 智慧仓储新动力:EasyCVR+AI视频智能监管系统方案助力仓储安全高效管理
    一、背景随着物流行业的快速发展和智能化水平的提升,智慧仓储视频智能监管系统已成为现代仓储管理的重要组成部分。本系统通过综合运用物联网、视频分析、边缘计算等技术手段,实现对仓储环境的全面监控、智能分析和高效管理。TSINGSEE青犀视频汇聚EasyCVR智慧仓储方案主要由视频监......
  • 智慧平安小区建设方案:EasyCVR视频+AI能力全面提升小区安全管理水平
    随着城市化进程的加快和科技的不断发展,智慧平安小区建设成为了提升社区治理水平和居民安全感的重要手段。TSINGSEE青犀EasyCVR智慧平安小区平台采集汇总智慧小区各类视频资源基础数据,进行分级分类管理,并为公安、政法、大数据局、街道社区等用户提供数据深度应用服务,可实现基层数据......
  • 智研未来,直击 AI DevOps,阿里云用户交流日杭州站来啦!
    在这个技术日新月异的时代,云上智能化DevOps正以前所未有的速度推动企业创新边界,重塑软件开发的效率与品质。为深入探索这一变革之路,诚邀您参与我们的专属闭门技术沙龙,携手开启一场关于云上智能化DevOps的挑战、实践与未来的展望之旅。活动亮点实战挑战剖析:深度交流云上D......
  • 智研未来,直击 AI DevOps,阿里云用户交流日杭州站来啦!
    在这个技术日新月异的时代,云上智能化DevOps正以前所未有的速度推动企业创新边界,重塑软件开发的效率与品质。为深入探索这一变革之路,诚邀您参与我们的专属闭门技术沙龙,携手开启一场关于云上智能化DevOps的挑战、实践与未来的展望之旅。活动亮点实战挑战剖析:深度交流云上D......