先看效果:
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="mAGnw0hd-1734852144731" src="https://live.csdn.net/v/embed/440093"></iframe>是不是可以以假乱真的程度了!哈哈哈
后面还准备了非常多Sora生成视频,不过先别急,在看之前我们先简单的了解一下Sora。
sora是什么?
我们来看官方的技术文档:
官方给出的解释是:作为世界模拟器的视频生成模型 。
报告里讲述了Sora模型的技术原理,他们使用了一种名为Transformer的架构来处理视频。
完整的技术报告很长,里面涉及非常多的专业名称,什么时间补丁啦,重标注技术啦,我把英文原版链接放在最后了,如果你感兴趣的话可以去看下完整版。
总结了一下,主要是以下四个步骤:
1、通过收集大量的视频标注获得其中的数据
2、对标注的数据进行模型训练
3、通过获取随机噪声数据进行扩散模型训练
4、去除噪音,循环采样观察去噪音的结果数据是否符合要求。
如果还是不太理解的话,我就简单打个比方,
比如你要画一幅海景画,
那先去网上搜搜海景长什么样,获取一些信息比如知道颜色用蓝色白色为主,海浪大概是什么形状(标注数据,训练数据),然后先随意的把蓝色和白色颜料泼洒在画布上,随机画一个初步的海浪形状(输入噪声进行扩散训练),然后对比客户给你的要求比如“惊涛骇浪”,浪花应该画的很大,然后再重新完善这幅画,不断循环往复(不断采样,循环训练),直到与客户描述一致时输出结果。
【这个比方只是想帮助大家理解Sora的视频生成原理,真正的训练过程肯定要比这个复杂上一万倍,如果感兴趣可以去看看Transformer框架和Diffusion Model,看看Transformer的注意力机制和扩散模型的去噪声原理】
如果您对Sora视频的魔力感到好奇,也许您的朋友也会。不妨分享给他们,咱们一起探索视频的新世界。
好啦,通过以上内容希望你对Sora的技术已经有了一个大致的了解啦,
接下来就让我们看看Sora生成的效果吧~
以下视频均由Sora生成:
一幅宁静而又超凡脱俗的场景以高分辨率的数字清晰度展现出来,捕捉到了黄昏时分简约的海滩,穿着时尚的人躺在用精致芦苇编织的漂浮椅上,漂浮在温柔的海浪之上;海洋散发出飘渺的烟雾粒子,这些粒子升起并在空中形成抽象的图案;水中的生物发光浮游生物发出柔和的光芒,当椅子沿着海岸线轻松漂流时,用神奇的光芒照亮了整个场景。镜头色彩柔和,色调朴实。这段镜头看起来像是来自 20 世纪 70 年代的自然纪录片。
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="Ft9BoZ9W-1734853339595" src="https://live.csdn.net/v/embed/439962"></iframe>五只宇航犬漂浮在宇宙飞船中,凝视着无边无际的太空。它们穿着带有美国徽章和美国宇航局标志的白色宇航服,头盔用带子固定。在背景中,可以看到行星和卫星,它们的颜色在宇宙的深蓝色映衬下显得充满活力。前景中的电影画面给人一种高科技和未来主义的旅程的印象,仿佛这些狗正在执行探索未知的任务。
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="SaEeFvNU-1734854885602" src="https://live.csdn.net/v/embed/439952"></iframe>在水母上添加活动眼珠。
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="ymuISQ2L-1734759468231" src="https://live.csdn.net/v/embed/439943"></iframe>在水中游动的熊猫鸭
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="8rzFqlOt-1734854739616" src="https://live.csdn.net/v/embed/440108"></iframe>佛像上的天堂鸟
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="ApRNdxAk-1734853317350" src="https://live.csdn.net/v/embed/439950"></iframe>冬日的日本集市
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="MyK7iGvn-1734855810317" src="https://live.csdn.net/v/embed/439953"></iframe>科技兔子的房间
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="oDq4gQwv-1734853306736" src="https://live.csdn.net/v/embed/439961"></iframe>一株植物和他的朋友们的动画黏土动画视频。
<iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="wz6CTrlf-1734854667622" src="https://live.csdn.net/v/embed/439951"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="8K0YLRwv-1734855928237" src="https://live.csdn.net/v/embed/439958"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="eLjcp5wa-1734855724817" src="https://live.csdn.net/v/embed/439957"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="nx4QWYYd-1734853532254" src="https://live.csdn.net/v/embed/439960"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="XNtSChSe-1734854634312" src="https://live.csdn.net/v/embed/439956"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="i0IPpbse-1734853293044" src="https://live.csdn.net/v/embed/439949"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="VNPCInwq-1734857419220" src="https://live.csdn.net/v/embed/440119"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="TyZFtY5y-1734855860364" src="https://live.csdn.net/v/embed/439954"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="89puHVMG-1734853563121" src="https://live.csdn.net/v/embed/439959"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="r9pfeXJS-1734854793486" src="https://live.csdn.net/v/embed/440105"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="amRAxnsk-1734853463554" src="https://live.csdn.net/v/embed/440100"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="MaJLRlJs-1734857406227" src="https://live.csdn.net/v/embed/440120"></iframe> <iframe allowfullscreen="true" data-mediaembed="csdn" frameborder="0" id="Obs1r66c-1734855916008" src="https://live.csdn.net/v/embed/439955"></iframe>看完了感觉还不错吧,Sora的出现证明了人工智能领域取得的重大进步,它代表了从静态图像生成到动态视频创建的进化飞跃,Sora最有趣的方面之一是它对动作和情感的深刻理解,它擅长创建不仅动作自然,而且表现出一系列情感的角色,赋予人工智能生成的内容前所未有的深度和真实感,为内容创作和创意扩展开辟了新的可能性。
今天的分享就到这里啦,如果觉得还不错就请分享给你的朋友吧,让他们也能感受到Sora的魔力!
附:
Sora技术文档英文原版链接:https://openai.com/index/video-generation-models-as-world-simulators/
中文版 :Sora技术报告【官方版】-CSDN博客
欢迎点赞,收藏,评论,你的鼓励就是我创作的最大动力!(๑╹◡╹)ノ"""
标签:视频,Transformer,训练,AI,生成,Sora,超多,标注 From: https://blog.csdn.net/weixin_53310927/article/details/144596696版权声明:本文为CSDN博主「姚梦蕾」的原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接及本声明。
原文链接:Sora效果一览为快!(超多AI视频效果)-CSDN博客