人手一部「小电影」!视频版Midjourney免费可用,一句话秒生酷炫大片惊呆网友

翘首以盼了三个月,Runway的Gen-2终于可以免费体验了!

可以说,这是AI视频工具发展史上值得载入史册的一天。

20230725172308f49c68b28ec46684d561089220d1a265444852740

试用地址:https://app.runwayml.com

这个AI工具,能用文本和图片迅速生成4秒的视频。也就是说,生成视频的方式,完全就是「无中生有」。

看完下面这个demo,直让人惊呼:导演和演员是真要被一键淘汰了?

激动的网友们纷纷跑去实测,感想就是:效果太炸裂了,这个AI是疯了吗?

唯一遗憾的就是,目前生成的视频只有4秒钟。(但如果前后的画面不突兀,多拼接几个4秒的视频,其实也够了)

激动的心,颤抖的手,经常在颅内自动上演各种大片的小编,可实在是按捺不住了。(所以我梦里的画面可以成真了吗?)

小编实测:人人都能制作小电影!

话不多说,实测这就来了。

进入页面后,先试一个简单的prompt:「人类第一次登陆火星,建造基地的场景」。

20230725172223e59ec78290c31bbd9280744764f31e1ea2eced664

Gen-2生成的画面内容是符合提示词描述的,但是画面中元素太过简单,艺术感也差强人意。

2023072517222457b686664b14bb87e455117341968a72232226126

于是小编又加了一部分和环境风格相关的内容:「人类第一次登陆火星,建造了火星基地,电影风格画面,未来风格。」

20230725172224a5b7801412e50bcd7e4188d5b53420b3131b37236

果然,这次Gen-2生成的内容和效果确实比之前的要丰富。

然而,这段视频还是存在一个问题:画面和人物几乎都是静态的,变化很少。

20230725172225048080165e23def00269095188bf47fadf9efa571

在反复测试之后,我们找到了一些提示词必备的内容:风格,镜头,内容,动作,环境和光线。

只要在提示词中加入这些内容,就会立马让生成的动画有显著的提升。

针对刚刚登陆火星的主题,小编又试着改写了一个提示词:

「电影风格,科幻风格,两个宇航员在火星基地中建造一个工作塔,非常强的阳光。」

20230725172226b33e7fe79731543681e1777a25341116f0979f584

现在生成的这段动画和前两个相比,不论是画面风格,内容丰富程度,动作效果,还是光影效果,都明显有了很大的提升。

2023072517222561f9c5148b1ff273fec691caa09406034cc5a5793

最后,小编再在同样的提示词基础之上,上传了一张图片,让Gen-2依据提示词和图片生成了一段动画。

2023072517230917d4f8780a6c97c581b147480bd93c67c5f0b2829

可以看到,和同一个提示词但是没有图片的第三个视频相比,带图片提示的第四个视频确实和图片内容有了相当大的关联。

20230725172227a2eaa8737025d3a8e4d160b73c27c6f9ab5fd4581

在精准的提示词和图片的共同描述下,基本上任何人都能瞬间生成一段理想的视频内容了。

时代变了:只有想不到,没有生不成

比起上次,Runway这次的的宣传语更进一步:「只要你想象得到,它就能给你生成」。 (上次的宣传语是「say it,see it」)

这还得了?要说咱们一般人和大导演们的差距,除了专业知识和经验,差的就是专业的摄影团队和演员了。

后者这样的差距现在完全被Gen-2这样的AI工具给补全了,不用相机,不用摄影机,不用3D建模,不用Cinema 4D……

只要你想象力爆棚、学会熟练的「咒语」,「人人都能做自己的电影」再也不是梦了!

无论是写实的画面——

20230725172227537511649f5dcbaefed777ee624234c9dc242a846

还是更抽象的东西——

2023072517222801a00f3504fd32970ea952eefd483fd64d57c3167

甚至还可以生成动画,再对它进行各种操作,然后插进自己的视频里。

20230725172229297f22d93923ede9c6f714f4c1cc4e45082e0d823

视频生成的门槛被大大拉低,这真是广大内容创作者的福音。

可以说,文生视频/图生视频的AI,实在是给行业太大的颠覆性改变了。

以往,如果剪刀手们想寻找到某个合适的素材(比如一些在空间中飞溅的颜色),得去stock footage这种素材网站去搜索,素材的范围很有限,而且人人都可用,素材并不是独家的。

20230725172230046d5ea011ce980ce5c7241936f9dc3d511e83544

或者,在工作室中拿一些油漆往周围扔出去,然后自己用相机抓拍。又费时又费力,还把周围环境搞得一片凌乱。

2023072517230971622370627c88914ae2718419d8c57b4894a0149

也可以在Blender中自己做,一般需要耗费数小时,甚至数天。

2023072517230903203032736b863654a330c461a8c16c58f103126

或者,就需要雇一个专业团队,专门来拍摄这一过程。所花的费用,大概在几百到几千美元不等。

现在,Gen-2把这些成本,统统打了下来!

Gen-1又火了

其实,此前的Gen-1,效果就已经足够炸裂。

随着Gen-2的发布,下面这段视频最近又被带火了。

只见,大叔一个响指,就变身贵族,穿越到了17、18世纪的欧洲宫廷。

很快,一个响指,又变身成了像是「星球崛起」里的主角,在残垣断壁的战场上穿梭。

这还不算什么,紧接着的性别切换,堪称一绝!

谁能想到,如此健美的女性,其实是刚刚那个「老爷子」。

20230725172232757358423827e3e80c4995151c174d1663d4dc653

不得不说,在网友的调教下,Gen-2生成出的背景、人脸以及服装不仅相当自然,而且似乎还有比较强的一致性。

但最难处理的手部,还是会经常出现bug。

20230725172310e4ba5b2625743884adb65139256147fce1a7b6433

一个MV,30刀

已经有手快的推特网友,测试了一下Gen-2生成MV的能力。

20230725172232b7a19d583dc7fe10d0a040471a16065a2257fe446

实践证明,我们需要一个相当长的提示,来产生优质和可控的结果。不过,可以通过添加或改变一个词来进行微调。

除此之外,还有一个重要的影响因素——锁定种子。

202307251722333129f6f9251d5b3b3ec926dae057d3afa7649a653

剩下的,就是进行大量的尝试了。

比如,这位Steve Mills总共生成了大约500秒的视频,并最终剪辑成了140秒的MV。

接下来请欣赏:「Blue City Streets」。

值得注意的是,这段视频其实是在测试版中制作的。

据作者估计,如果按公开版的价格,整个制作下来至少要花费30美元。再加上之前的学习和摸索阶段,这个价格还会更高。

手把手教你如何使用

看了这么多示例,怎么进阶好莱坞大导?咱们一步步来。

首先,注册一个账号。

20230725172233d8cd3bd66dae807e1766971cbd9087ee7147ef289

进入主页后,选择Gen-2:Text to Video。

20230725172234c24d6eb45b21539db6c9729305afae18a05b1a171

然后,Prompt box就出现了。此时就需要你大显身手了!

20230725172310a5ff98301312f06797e531fee5b0f8820ee9de852

Prompt完成后,你还可以打开选项设置卡,升级你的成果,比如选择插入帧,让视频过渡更平滑,提高分辨率,去除水印等。

然后,点Generate,接下来就是见证奇迹的时刻!

20230725172236a1228c992b324fba1b7439b38d991f6d4d3e75593

但是很多小伙伴要说了,自己是语死早,太复杂、太华丽的prompt根本写不出来啊。

别急,这次上线的Gen-2还给了我们一大惊喜——即使是简单的prompt,Gen-2产出的视频也并不差。

比如,简单地输入「一棵树」,生成的视频是这样的——

202307251722361200ebf58fcf6aa3d1a6583837fc4c8fed659b548

如果输入「在美国中西部长满草的山上的一棵树,专业电影风格,景深浅,主体对焦,美丽的灯光,流畅的动态运动」,生成的视频是这样的——

20230725172235b83fd96632d19214efb3809f6e54c88cddf2bf112

就是说,不必进阶为prompt大师,咱们普通用户也能快速生成酷炫的视频了!

网友热议

对此,B站网友们纷纷开起了脑洞。

2023072517223725d9d6e313303565712747ee70e2cf34a5668a330

20230725172312c2cd4d7366bc1877534070c8f4a676eeeaccf7928

2023072517223714195a318d6b45b26ba649f0708db05c5e4cae559

2023072517231293dd41a55c777fd48c214978a30507aa03990e586

也有人上手实测了。

20230725172313e922cab76a09b0cab4b92656e11e90a666d4d2161

2023072517223923115590731b629a84298641e1e1c31561fc7b860

国外网友看到了Gen-2也是一片惊呼

终于等到你,还好我没放弃。

202307251722413784b0f23a67a5ccab3154ed321cc292e591ad954

随着生成式AI不断产生视频内容,娱乐行业马上要变天了。

20230725172240b1383b32555e4b8044b0509bdd233339b57802861

在几十年前,那时的电影跟现在的画质还有着天差地别。

而如今,有了Gen-2之类AI工具的加持,或许以后电影的边界,只是人类想象力的边界,而不再是技术的边界了。

© 版权声明

相关文章