首页 > 其他分享 >【收藏】Stable Diffusion 制作光影文字效果

【收藏】Stable Diffusion 制作光影文字效果

时间:2023-08-10 15:24:16浏览次数:53  
标签:Diffusion 部署 模型 一键 NAS 文字效果 Stable

00089-1982945900.png
00086-2872893613.png

大家对于最近 Stable Diffusion 不断出新的视觉“整活”印象都很深刻,很多人对最近比较流行的制作光影文字很感兴趣,制作光影文字可以作为进阶 Stable Diffusion 的必备一课,本文将详细讲解基于函数计算部署Stable Diffusion 实现光影文字效果,观看文章需要5分钟,看完即会赶紧尝试!

资源准备

部署云端 Stable Diffusion

  1. 选择“AI数字绘画 stable-diffusion 自定义模版“,点击立即创建,开始创建 Stable Diffusion

https://fcnext.console.aliyun.com/applications/create
截屏2023-08-08 23.09.42.png
2.进行基础配置
直接部署 —》首次开通函数计算配置提示的“角色名称”—》确认 FC和NAS已经开通
截屏2023-08-08 23.14.18.png
3.进行高级配置
选择地域—》绘图类型任选1个—》首次部署需要RAM角色 APN授权
其他地方如无特殊要求可以直接默认
截屏2023-08-08 23.16.53.png

  1. 创建并部署默认环境

确认知晓使用SD过程中产生的函数计算和 NAS 费用(计费项超出试用额度后直接转为按量付费)
截屏2023-08-08 23.21.41.png

  1. 部署成功

两个地址解释如下:

  • 第一个以sd开头的是 Stable Diffusion webui访问域名,您可以直接打开使用内置的 SD1.5\动漫风格 \真人风格 模型
  • 第二个以 admin 开头的链接则是您的模型文件以及插件文件的管理后台,我们需要先访问这个后台进行模型的上传。

截屏2023-08-08 23.24.28.png

  1. 访问admin开头的域名,进入模型管理平台

准备大模型

您可以直接在模型库中下载** majicMix realistic模型,**模型将会被下载至您的 文件管理(NAS) 中,这会产生一定的文件存储费用请务必注意。下载好后重启 Stable Diffusion 即可使用。

模型库功能由阿里云 OSS 提供,模型/数据集/文件均来源于第三方,不保证合规性,请您在使用前慎重考虑。
截屏2023-08-09 00.42.52.png

准备 Controlnet

ControlNet 包含插件和模型两部分。为了降低费用消耗,建议先下载到本地后,通过 admin 上传至 NAS。

  1. ControlNet 插件地址,进入页面后,点击右侧绿色的 Code 按钮,并选择 Download ZIP 下载插件代码

项目地址:https://github.com/Mikubill/sd-webui-controlnet

  1. 下载完成后,通过管理工具上传您的下载的 zip 包

  1. 刷新下当前目录内容,并将 controlnet 解压到当前目录。

  1. 等待解压完成后会自动刷新,此时可以看到解压好的目录

  1. 进入目录后,将其中的内容剪切或复制至上一层

  1. 在上一层目录粘贴

  1. 最终形式如下(此时可以删掉刚才上传的 zip 包以及随机名称的文件夹)

  1. 回到 Stable Diffusion,重新加载 WebUI,而后刷新页面

  1. 确保扩展插件目录已存在 sd-webui-controlnet,应用并重启用户页面

  1. 此时可以看到您的页面上已经有了 ControlNet 配置项

  1. 接下来需要下载 SD 需要的模型

下载地址:https://huggingface.co/ioclab/control_v1p_sd15_brightness
截屏2023-08-09 00.48.30.png

  1. 上传下载模型后上传在文件夹中 /mnt/auto/sd/models/ControlNet,重新加载 Stable Diffusion 备用

截屏2023-08-09 00.50.34.png

以上步骤如果遇到任何问题可以查看详细文档
https://developer.aliyun.com/adc/scenario/exp/b2cc0e1c3a6244e0bd9fc0f37acd5a0e?

制作光影文字

  1. 准备文字图,您可以使用 PPT 或者PS制作黑底白字的图(字要大)

截屏2023-08-08 23.55.11.png

  1. 添加提示词设置采样步数,以城市夜景为例

正向提示词:chengshi,city,Building,tall building,Neon Light
反向提示词:EasyNegative,(worst quality:2),(low quality:2),(normal quality:2),lowres

过多采样步数会导致文字不清晰,我设置 20,您可以自行调节

  1. 文字图放入 ControlNet

启用—All—预处理:None——模型:brightness

以下参数经过测试,您可以根据需要自行调节
Control Weight: 0.4左右
Starting Control Step:0~0.2
Endting Control Step: 0.5~0.7
截屏2023-08-09 00.26.11.png
00089-1982945900.png
00090-0.png

常见费用问题

Q1:为什么我领取了试用额度,依然有函数计算小额计费?

Stable Diffusion 使用“公网出流量”,而试用额度不支持抵扣公网出流量的费用。如您未购买相关资源包,公网出流量使用量将计入按量付费。参考如下:
如果您生成100张图。
公网出流量:5MB/每张图 * 100张图 = 500MB, 0.25元(0.50元/GB)
说明:预估费用仅供参考,实际费用取决于图片大小、调用频率等多种因素,如需长期使用本服务,请仔细阅读函数计算(FC)资源使用费用,避免产生意料之外的费用;如仅为体验功能不做长期使用,请一定按照文档最后删除步骤,部署之后立即删除。

Q2:为什么我领取了 NAS 50G 3个月额度,存了几个模型后发现有付费?

您上传的模型会存储在阿里云文件存储 NAS上 ,NAS 通用型的实例规格分为性能型和容量型,您领取的NAS免费额度可以抵扣容量型实例50G的存储 或者性能型实例子9.15G的,本实验使用性能型NAS,因此您的NAS免费额度为性能型9.15G ,超出此存储大小之后,NAS一定会收取您的费用。性能型实例超出免费额度后后每个GB 每个月收取您1.8元
假如小明0元购买了文件存储 NAS 资源包,可上传多少个基础大模型或lora模型呢?
文件存储NAS提供通用型NAS资源包50 GiB ,使用期限3个月。本实验使用性能型NAS,性能型NAS 5.47 50 GiB通用型基准容量能抵扣50 ÷ 5.47 = 9.15 GiB 性能型NAS使用量。
假如基础大模型3.97G,Lora 模型400MB,那么小明使用免费额度可以存储2个大模型,3个Lora模型。
请您注意账单,必要时可以选择删除NAS实例。

利用函数计算一键部署 AIGC 应用

将会通过以下5个实验场景进行学习

标签:Diffusion,部署,模型,一键,NAS,文字效果,Stable
From: https://www.cnblogs.com/Serverless/p/17620406.html

相关文章

  • Latent Diffusion Model搭建过程
    目录源码拷贝虚拟环境VSCode带命令行参数运行py文件问题记录此方式在服务器(Ubuntu)上安装StableDiffusion,使用miniconda虚拟环境。在Windows10系统上使用VScode远程开发方法进行调试和运行。注意:使用VSCode连接服务器远程开发调试,代码中的相对路径是打开文件夹的路径,并不是当前......
  • Latent Diffusion Model快读
    总览  原始的扩散模型训练及推理是在像素空间进行的,这将耗费大量的GPU和能量资源。为了缓解这一状况,作者提出了一种方案,将高分辨率图像的合成过程分解为两个过程:图像编解码和隐特征空间扩散。图像编码器将像素空间中图像编码为隐特征latentcode(生成过程不需要此步骤)扩散模......
  • 【入门教程】3202年了,还有人没用stable diffusion画个自己的AI小姐姐吗。
    个人绘画作品: 说明本文主要是讲一下如何安装、使用整合包,以及介绍画真人图片的大模型(介绍的整合包只提供二次元模型,个人不太感兴趣)通过最简单的介绍帮助大家快速入门,开始画图,不会深入的进行讲解,毕竟网上讲的已经很详细了。 介绍目前市面上用的最多的AI绘画工具是stable-......
  • 手把手教你在云环境炼丹(部署Stable Diffusion WebUI)
    前几天写了一篇《手把手教你在本机安装StableDiffusion秋叶整合包》的文章,有些同学反映对硬件的要求太高,显卡太TM贵了。今天我再分享一个云服务器炼丹的方法,方便大家快速入门上手,这个云服务不需要特殊网络设置,能连接公网网盘,随开随用,有3090显卡,也有4090显卡,不过我经常使用的是A5......
  • Mac部署AIGC图片生成服务——基于stable-diffusion
    Mac部署AIGC图片生成服务——基于stable-diffusionAIGC即人工智能内容生成,是目前非常火的一个概念。随着各种大模型的问世,通过AI来生成内容的能已经越来越强大。本文将从应用实践方面进行介绍如何在自己的PC电脑上部署一个强大的AI图片生成服务。关于AI绘图,我相信你一定不太陌生,......
  • AI绘画StableDiffusion实操教程:可爱头像奶茶小女孩(附高清图片)
    本教程收集于:AIGC从入门到精通教程汇总今天继续分享AI绘画实操教程,如何用lora包生成超可爱头像奶茶小女孩放大高清图已放到教程包内,需要的可以自取。欢迎来到我们这篇特别的文章——《AI绘画StableDiffusion实操教程:可爱头像奶茶小女孩》。在这篇文章中,我们将一步步教你如何利......
  • 手把手教你在本机安装Stable Diffusion秋叶整合包
    整合包对非技术出身的同学比较友好,因为秋叶大佬把相关的东西已经都整合好了,只需要点点点就行了。当然懂编程的同学就更没有问题了。准备为了保证AI绘画的效率,建议在本机安装Nvidia独立显卡,也就是俗称的N卡,并且显存要达到6G以上,6G只能出图,如果要做训练建议12G以上。推荐选择RTX4......
  • n stable报错curl: (7) Failed to connect to nodejs.org port 443: Connection refus
    nstable报错curl:(7)Failedtoconnecttonodejs.orgport443:ConnectionrefusedError:failedtodownloadversionindex(https://nodejs.org/dist/index.tab)使用淘宝源exportN_NODE_MIRROR=https://npm.taobao.org/mirrors/nodenstable......
  • Debian 11 安装Nginx最新stable版本
    其实官方文档已经很清楚了,我写这个文档只是为了记录下安装过程#Installtheprerequisites:aptinstallcurlgnupg2ca-certificateslsb-releasedebian-archive-keyring-y#Importanofficialnginxsigningkeysoaptcouldverifythepackagesauthenticity.Fetch......
  • 论文翻译(扩散模型来了):Diffusion-Based Mel-Spectrogram Enhancement for Personalized
     利用发现的数据来创建合成声音是具有挑战性的,因为现实世界的录音通常包含各种类型的音频退化。解决这个问题的一种方法是使用增强模型对语音进行预增强,然后使用增强后的数据进行文本转语音(TTS)模型训练。本论文研究了使用条件扩散模型进行广义语音增强,旨在同时解决多种类型的音......