首页 > 其他分享 >Sora不香了,Runway Gen-3震撼发布!AI电影时代真的要来了!(附与快手可灵对比测试)

Sora不香了,Runway Gen-3震撼发布!AI电影时代真的要来了!(附与快手可灵对比测试)

时间:2024-06-18 18:31:45浏览次数:20  
标签:视频 00 快手 Runway AI 可灵 Gen

文章首发于公众号:X小鹿AI副业
大家好,我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也一名 AIGC 爱好者,持续分享更多前沿的「AI 工具」和「AI副业玩法」,欢迎一起交流~

AI 视频太卷了!

刚上线的快手可灵(Kling)、Luma AI 的 Dream Machine 的热乎劲还没过,Runway 又发布重磅消息:

Runway Gen-3 来了!

在这里插入图片描述

上一次 Runway 带来这么重磅的消息,记得还是去年的 11 月份:Gen-2 的发布。

程序员X小鹿:【AI视频】文本生视频工具又迎来重大更新,Runway Gen-2 到底有多强?

图片

Runway Gen-2 的发布,让更多的人认识了 AI 视频领域的这位王者。

因为不管是从生成视频的真实性、一致性还是可控性等方面,Runway 在众多 AI 视频工具中,都可以算的上排在前列的。

不过此后 Runway 便一直很低调。直到今天,时隔半年之久,AI 视频领域的王者,Runway 终于回来了!

一、视频展示

先来看几个官方示例感受一下:

下面所有视频都是使用 Gen-3 Alpha 生成的,没有经过任何修改。

视频上传不方便,Runway 官网看吧:

https://runwayml.com/blog/introducing-gen-3-alpha/

从这几个官方示例视频就可以看到,不管是从运镜效果、真实性、以及对非真实世界的概念的理解方面,都不禁让人感叹:AI 电影时代真的要来了!

二、Runway Gen-3 有哪些重磅更新

从 Runway 官网来看,Gen-3 Alpha 在保真度、一致性以及动作方面,相比 Gen-2 都有了重大改进,是构建通用世界模型的一步。

1、更高的可控性

上周体验的快手的可灵(Kling)、Luma AI 的 Dream Machine,在可控性方面,可以说基本没有。

生成的视频如果不满意,只能调整提示词、一次次的 roll。

当然也可能是因为他们刚刚上线的原因,这方面还没有更新。

相比之下,Runway 的可控性就高很多了。

在 Runway Gen-3 之前,就已经有了运动画笔、高级摄像机控制、导演模式。

Gen-3 发布后,Runway 也将推出更多工具的支持,用于更精细地控制结构、风格和运动。

2、细粒度时间控制

Gen-3 Alpha 已经过高度描述性、时间密集的字幕训练,能够对场景中的元素进行富有想象力的过渡和精确的关键帧。

视频太多,传着太麻烦。视频示例直接看这里吧:

Sora不香了,Runway Gen-3震撼发布!AI电影时代真的要来了!(附与快手可灵对比测试)

**,时长00:10

Prompt: A tsunami coming through an alley in Bulgaria, dynamic movement.

提示:一场海啸从保加利亚的一条小巷中传来,动态运动。

**,时长00:10

Prompt: A first-person POV shot rapidly flies towards a house’s front door at 10x speed.

提示:第一人称 POV 镜头以 10 倍的速度快速飞向房屋的前门。

3、逼真的照片级人物

Gen-3 Alpha 擅长通过各种动作、手势和情感生成富有表现力的人类角色,从而解锁新的讲故事机会。

**,时长00:10

Prompt: A middle-aged sad bald man becomes happy as a wig of curly hair and sunglasses fall suddenly on his head.

提示:一个中年悲伤的秃头男人变得快乐,因为一顶卷发和太阳镜突然落在他的头上。

可以看到表情的变化非常明显。同样的提示词,试了是快手的可灵:

**,时长00:05

快手的可灵(Kling),没有表现出太多情感的变化。还有头顶上放着好几个太阳镜。明显是并没有理解这个语义。

4、为艺术家打造

训练 Gen-3 Alpha 是由研究科学家、工程师和艺术家组成的跨学科团队的共同努力。可以很好地诠释各种风格和电影术语。

**,时长00:10

Prompt: Zooming through a dark forest with neon light flora lighting up. 提示:在黑暗的森林中放大,霓虹灯下的植物群被照亮。

**,时长00:10

Prompt: A giant humanoid, made of fluffy blue cotton candy, stomping on the ground, and roaring to the sky, clear blue sky behind them.

提示:一个巨大的人形生物,由毛茸茸的蓝色棉花糖制成,踩在地上,咆哮着冲天而起,身后是湛蓝的天空。

同样的提示词,试了试快手的可灵,除了有些呆、少了些震感的效果,其他还好:

**,时长00:05

5、行业定制

Runway 一直在与领先的娱乐和媒体组织进行合作,以创建 Gen-3 的定制版本,允许更风格化的控制和一致的角色,针对特定的艺术和叙事需求。

结束语

这一年,涌现出了太多的 AI 视频工具。我们时不时的就会在网上听到,哪家又开发出了一款多么炸裂的 AI 视频工具,哪家又发布了一项多么重大的更新。

2024,AI 视频不管是用于影视、广告、电商等行业的日常工作,还是用来做自媒体、做副业,都将大有可为。

关于更多 AI 视频工具,可以在【AI视频】专栏中查看。会不定期更新 AI 视频相关工具和玩法。


我是程序员X小鹿,前互联网大厂程序员,自由职业2年+,也是一名 AIGC 爱好者,欢迎一起交流~

觉得文章有帮助,请帮忙点赞收藏关注一下呦~

标签:视频,00,快手,Runway,AI,可灵,Gen
From: https://blog.csdn.net/u011886447/article/details/139779828

相关文章

  • 【文末附gpt升级秘笈】SDCon 2024全球软件研发技术大会:引领AI 2.0时代的软件开发新篇
    SDCon2024全球软件研发技术大会:引领AI2.0时代的软件开发新篇章一、引言随着人工智能技术的飞速发展,我们迎来了AI2.0时代。在这个时代,人工智能技术不仅深刻影响着我们的日常生活,更在软件研发领域掀起了一场革命。AI原生应用的出现,使得每行代码、每个应用都有可能迎来被智能......
  • 高效、智能、安全:小型机房EasyCVR+AI视频综合监控解决方案
    一、背景需求分析随着信息技术的迅猛发展,小型机房在企事业单位中扮演着越来越重要的角色。为了确保机房的安全稳定运行,远程监控成为了必不可少的手段。二、视频监控视频监控是机房远程监控的重要组成部分。通过安装IP摄像机及部署视频监控系统EasyCVR平台,可以实现机房的实时监......
  • AI从云端到边缘:人员入侵检测算法的技术原理和视频监控方案应用
    在当今数字化、智能化的时代,安全已成为社会发展的重要基石。特别是在一些关键领域,如公共安全、智能化监管以及智慧园区/社区管理等,确保安全无虞至关重要。而人员入侵检测AI算法作为一种先进的安全技术,正逐渐在这些领域发挥着不可替代的作用。传统的人工监控方式往往难以做到全天......
  • 【ai】如何在ollama中随意使用hugging face上的gguf开源模型
    【背景】ollama的pull命令可以直接pullollama列表中现有的模型,但是ollama可以直接pull的模型大都是英语偏好(llama2有直接可以pull的chinese版本),而huggingface上则有大量多语种训练的模型,如果能直接使用huggingface上的gguf开源模型,那就自由多了,本篇介绍方法。【命令】......
  • 揭秘大模型AI Agent:人工智能的新纪元
    什么是AIAgent(LLMAgent)“Agent”是一个跨学科的概念,涵盖了哲学、计算机科学、经济学、生物学等多个领域。尽管定义和应用范围各异,代理的核心特征在于其自主性、感知和决策能力,以及目标导向的行动能力。理解代理在不同领域中的具体应用和特征,有助于更全面地认识和利用这......
  • 【ACM独立出版/Fellow大咖云集】 第三届机器人、人工智能与信息工程国际学术会议(RAIIE
    2024年第二届机器人、人工智能与信息工程国际学术会议(RAIIE2024)将于2024年7月5-7日在新加坡举行。本次会议主要围绕“机器人”、“智能仿生”和“信息科学”的最新研究进展展开,会议汇聚了该领域内国际学者、专家、研究人员及相关从业人员,分享研究成果,探讨机器人的最新发展趋势,为......
  • [论文速览] Small-scale proxies for large-scale Transformer training instabilitie
    Pretitle:Small-scaleproxiesforlarge-scaleTransformertraininginstabilitiessource:ICLR2024paper:https://arxiv.org/abs/2309.14322code:ref:小尺度Transformer如何ScaleIdea这篇文章想通过小模型来研究大模型(Transformer)训练不稳定的原因Method(Model)图......
  • 希望六月:参加阿里云 PolarDB 与「AI函数计算」动手活动,送博客园T恤
    没想到今年六月是园子与阿里云的推广合作季,同时有好几个推广项目在合作,比如:阿里云开发者社区有奖征文活动,期待您出文相助「指间灵动,快码加编」:阿里云通义灵码,再次降临博客园阿里云618创新加速季,5亿补贴享不停,上云礼包抢先领再加上今天发布的PolarDB与AI函数计算动手活动......
  • AI写作与论文辅助:10款PC端AI工具的创新应用
    我看大家都推荐的差不多了,常见好用的PC软件就那些,我不想反复“咀嚼”了,我想另辟蹊径推荐点不一样的,比如10款PC端的AI网站。AI已经全方位“侵入”我们的生活,从AI写作到AI绘画,从AI视频到AI语音,AI无所不包。真正学会用好AI神器,可以解决我们生活中很多烦恼。一、bilingAI写作直达......
  • 大家都是怎么写毕业论文的? 推荐ai写论文工具
    写作这件事一直让我们从小学时期就开始头痛,初高中时期800字的作文让我们焦头烂额,一篇作文里用尽了口水话,拼拼凑凑才勉强完成。大学时期以为可以轻松顺利毕业,结果毕业前的最后一道坎拦住我们的是毕业论文,这玩意不是苦战几个通宵就能解决的!一件无从下手的事情从开头就能让人做......