首页 > 其他分享 >【小沐学NLP】在线AI绘画网站(网易云课堂:AI绘画工坊)

【小沐学NLP】在线AI绘画网站(网易云课堂:AI绘画工坊)

时间:2023-08-12 13:34:12浏览次数:41  
标签:Diffusion NLP 提示 AI 模型 绘画 civitai Stable

1、简介

Stable Diffusion是一种强大的图像生成AI,它可以根据输入的文字描述词(prompt)来绘制图像。在Stable Diffusion上完成优秀图像的制作需要有正确的模型+准确的提示词+参数调整+后期处理技术。

网易云课堂云课堂stable diffusion上线。 在这里插入图片描述

1.1 参与方式

  • 参与方式一 ① 进入网易云课 ② 点击AI绘画工坊 ③ 进入云课堂Stable Diffusion ④ 开始创作

在这里插入图片描述

  • 参与方式二 电脑端复制下方链接到网址栏,一键进入云课堂Stable Diffusion

在这里插入图片描述

1.2 模型简介

Stable Diffusion官方会提供SD模型(目前更新到Stable Diffusion 2.1-v)。除此之外,我们也可以从Civitai上面获取模型。Civitai是目前一个比较成熟的Stable Diffusion模型社区,里面拥有几千个模型,以及数十万张附带提示词的图像,这些都让Stable Diffusion的学习成本降低了很多。

我们目前使用比较多的主要包括2类模型:大模型、微调模型

  • 大模型:常见的大模型一般为Checkpoint(ckpt)和safetensors两种格式,大模型一般是通过Dreambooth训练得到,特点是出图效果好,但是由于训练的是一个完整的新模型,所以训练速度普遍偏慢,生成模型的文件较大,一般都在几个G。
  • 微调模型:微调模型需要配合大模型使用,常见包括Embedding模型、Hypernetwork模型、Lora模型、VAE模型(常用的是Embedding和Lora模型)。
    • Embedding模型:主要用于定义新关键字来生成新的对象或风格的小文件(图像风格引导)。不会改变模型,只是定义新的关键字来实现某些样式。
    • LoRA模型:简单理解就是大模型的补丁,可以用于修改图像风格/增加细节。因为效果很好并且训练较为快速和简单,所以性价比最高,也是目前最常用的微调模型。
Deliberate
C站链接:https://civitai.com/models/4823/deliberate
模型说明:胜任多种风格,可以创建任何想要的东西,我们也将它称为万能模型。

Anything V5
C站链接:https://civitai.com/models/9409/or-anything-v5
模型说明:Anything V5 是一个以二次元漫画为主打的模型,具备非常好的出图效果,并且对关键词的要求并不高,但是风格呈现比较单一。

ChilloutMix
C站链接:https://civitai.com/models/6424/chilloutmix
模型说明:该模型最大的特点就是可以画出超级逼真、超级写实的亚洲人像(有可能你在某些平台上看见的小姐姐图片都是这个模型做出来的哦)。

Henmix_real写实人像
C站链接:https://civitai.com/models/20282/henmixreal
模型说明:使用该模型可以生成非常有质感的写实人像照片。

ReV Animated
C站链接:https://civitai.com/models/7371?modelVersionId=46846
模型说明:该模型特别适合进行动漫人物或者场景的2.5D/3D的绘制。

2、使用费用

<font size=5 color=blue face=楷体>每天可使用AI绘画工坊制作20次!!!</font> 在这里插入图片描述

3、操作步骤

一般AI绘画步骤有这几个:选择模型,输入提示词,调整参数,后期处理等。 在这里插入图片描述

在这里插入图片描述

3.1 选择模型

在这里插入图片描述

  • 这里我们选择模型 “Anything V5”。 在这里插入图片描述

3.2 输入提示词

  • 正向提示词: 在这里插入图片描述

  • 反向提示词: 在这里插入图片描述

  • (1)这里我们复制一下官网上提供的提示词,点击那个按钮“复制金克丝提示词”。 在这里插入图片描述

  • (2)复制到正向提示词文本框中 在这里插入图片描述

  • (3)然后点击下图中的那个按钮“”,一键扩展上面输入的信息。 在这里插入图片描述

  • (4)接着相关控件里的内容自动更新如下: 在这里插入图片描述

  • (5)然后点击下图的按钮,选择网易云中给大家准备的金克丝Lora模型: 在这里插入图片描述

  • (6)Lora模型界面显示如下,选择一个之后: 在这里插入图片描述

  • (6)点击按钮“生成”,进行生成结果图片。 在这里插入图片描述

3.3 调整参数

在这里插入图片描述

3.4 图片生成

在这里插入图片描述

4、测试例子

提问法制作Prompt:

问题》》》确定prompt
想生成的图像是照片还是画作呢?	》》》画作(Painting)
主题是什么?人物?动物?风景?	》》》小狗(a cute dog)
灯光上面的细节?柔和的?环境光?霓虹灯?》》》自然光(natural light,)
环境上面的细节?室内?室外?水下?》》》在天空中(in the sky)
色彩方案呢?鲜艳的?昏暗的?柔和色调?》》》明亮色彩(bright colors)
画面风格?3D渲染?吉卜力工作室?电影海报?》》》新海诚(by Makoto Shinkai)

4.1 小狗

  • 模型:
ReV Animated
  • 提示词:
A painting of a cute dog,natural light,in the sky,with bright colors by Makoto Shinkai

在这里插入图片描述

4.2 蜘蛛侠

  • 模型:
ReV Animated
  • 提示词:
Crochet doll of Spiderman, studio lighting

在这里插入图片描述

4.3 人物

  • 模型:
ReV Animated
  • 提示词:
Pencil painting of Emma Watson

在这里插入图片描述

4.4 龙猫

  • 模型:
ReV Animated
  • 提示词:
A cute totoro in a yard, bokeh

在这里插入图片描述

结语

如果您觉得该方法或代码有一点点用处,可以给作者点个赞,或打赏杯咖啡;╮( ̄▽ ̄)╭ 如果您感觉方法或代码不咋地//(ㄒoㄒ)//,就在评论处留言,作者继续改进;o_O??? 如果您需要相关功能的代码定制化开发,可以留言私信作者;(✿◡‿◡) 感谢各位大佬童鞋们的支持!( ´ ▽´ )ノ ( ´ ▽´)っ!!!

标签:Diffusion,NLP,提示,AI,模型,绘画,civitai,Stable
From: https://blog.51cto.com/fish/7057718

相关文章

  • 真正的包罗“万”象!上海AI实验室、港中文等提出V3Det目标检测数据集,含有13029个类别!
    前言 数据集标签纷繁复杂,一直缺少系统、完善的分类体系,而这恰恰又是通用目标检测大模型的重要基础。今天,给大家介绍一篇超级“狠活”文章,来自上海人工智能实验室和香港中文大学的学者提出了一个海量类别的目标检测数据集V3Det,总类别数达到13029!本文转载自我爱计算机视觉仅用于......
  • mage-ai 替换airflow 的现代数据pipeline 平台
    mage-ai是一个可以替换airflow的现代数据pipeline平台包含的特性友好的开发体验支持python,sql,r语言不以来DAG的可开发模式交互式代码数据优先基于云的协作快速部署扩展简单提供可观测性说明官方提供来的demo站点,可以方便的体验学习,目前来看mage-ai算是一个很......
  • GPT之路(一) AI基础之自然语言处理NLP工作原理
    这篇随笔主要是介绍AI基础知识,自然语言处理NLP1.自然语言处理NLP工作原理自然语言处理(NaturalLanguageProcessing,NLP)是指计算机与人类自然语言进行交互的技术领域,它涉及到语音识别、文本分析、机器翻译、情感分析、自然语言生成等多个方面。NLP是人工智能的一个分支,它使计......
  • AirNet使用笔记9
    摘要:音视频工具;1、合成通用音视频工具,工具支持将屏幕操作记录文件(.dat/.fdat)和语音回放文件(.wav)合成为通用视频格式文件(例如.mp4).dat是一种自定义的数据格式;.fdat是mp4格式;合并时候需要直接把fdat和wav进行合成(屏幕记录文件(.dat/.fdat)放入工具目录下的datafiles文件夹中;将音频文......
  • AI 一键去水印:教你无限量使用商业图片的技巧
    场景再现刚开始注册账号(啥账号具体不表了,小编不喜欢的那个),想弄个闪亮,好看,有个性化的Logo。作为一名非专美工小白人员,网上翻了很久作图工具,要么就是不好用,好用的大部分都收费。最后没办法,找到一个相对来说用起来顺手而收费的网站。如下是我用该网站自行设计的一个Logo。没错,正如......
  • 我决定花一小时教会你如何AI战疫
    面对新冠肺炎疫情,AI开发者们正在积极运用算法、算力、软件等“武器”助力抗疫。......
  • AIGC做副业,月入过万不是梦
    @\背景最近,尝试利用AIGC在头条号、微信公众号上开始写文章,并且通过这个机会赚取了一笔的外快。这个经历让我深刻认识到,通过互联网平台展示自己的才华和知识,不仅可以实现个人价值,还能创造经济回报。在这个数字化时代,AIGC为我们提供了一个无限的创作空间,让我们可以分享自己的见解......
  • 大模型时代的程序员:不会用AIGC编程,未来5年将被淘汰?
    作者|郭炜策划|凌敏前言下面是一段利用Co-Pilot辅助开发的小视频,这是ApacheSeaTunnel开发者日常开发流程中的一小部分。如果你还没有用过Co-Pilot、ChatGPT或者私有化大模型帮助你辅助开发的话,未来的5年,你可能很快就要被行业所淘汰。因为这些善于使用AIGC辅助编......
  • 面对AI冲击,技术人才该如何考核?
    一天下午,在与知名企业的技术交流会议室里,一位兄弟企业的CTO小力苦笑着,分享了一个技术招聘的故事: “我们有个高级工程师,为了搞定MySQL三个表Join的问题,搞了一整天都研究不出来。结果他尝试将表结构扔给AI,谁知道5分钟内就解决了这个难题。” 同时,一位知名互联网企业的技术主管......
  • Windows中实现类似tail -f 的命令
    1.说明需要在PowerShell中使用,Shift+鼠标右键,即可出现打开PowerShell窗口的命令,如图:打开之后是这样的2实时查看文件命令类似于Linux中的"tail-f<文件名>"的命令2.1语法结构完整写法get-content[-wait][-encoding字符编码][File]缩写,与完整写法效果是一样的gc[-wait][-en......