查看原文
其他

Gen-2里程碑式更新!4K高清大片直出,AI生成视频的GPT时刻来临

月山橘 头号AI玩家 2023-11-15
作者 | 月山橘‍‍
编辑 | 张洁


这可能是AI生成视频的GPT时刻……

就在上周五凌晨,Runway Gen-2迎来了一次里程碑式的更新。


以往AI视频饱受诟病的画面闪烁、不连贯、扭曲变形等问题,在这次更新后得到很大改善。

现在,无论是用Gen-2文生视频还是图生视频,视频的保真度和一致性都有了重大提升,分辨率一下提升到了4K水平!


根据众多网友的测评,可以说,目前Gen-2的水平已经接近应用级别,尤其是风景类视频。

照现在这个技术迭代速度,可能用不了多久,商用视频素材都不再需要进行专业拍摄,只需要利用AI批量生成就可以了……

这样看来,称Gen-2这次更新为“彻底改变了游戏规则”,可以说是一点也不为过。


人手一支MV大片不是梦


为了能让各位玩家有更直观的感受,我们先来看看网友们都用Gen-2生成了什么杰作。

Gen-2更新不到一天,X(Twitter)博主“Nicolas Neubert”就迫不及待地用Gen-2制作了一支时尚广告大片。

‍‍‍‍

梦幻柔和的韦斯·安德森风、清冷高级的模特、流畅连贯的镜头编排,再配上音乐,不说我还以为是Gucci的系列广告大片……

Nicolas也是丝毫没吝啬对Gen-2此次更新的好评——“极大的提升、更少的AI感、无限的新可能”。


要知道,在广告行业内,即便是制作一支普通传统的广告,都往往需要几个甚至几十个人的团队,费时费力又费钱。

如今,在AI的驱动下,一个人用不到一天的时间就能保质保量地出片。

虽然AI生成的视频可能在细节的把控上仍存在不足,不如专业拍摄的画面真实灵动,但其所耗费的时间和成本远低于专业拍摄,所以目前Gen-2的表现依然称得上是可圈可点。

X博主“maxescu”通过“Text to Video”生成了9个视频镜头,无论是人像还是超现实主义风景,都展现出了高清的画质和自然的动态效果。


小红书博主“Mia Fan”用Gen-2呈现了自己对阴森怪诞、唯美飘逸的舞台设计的想象:

‍‍‍‍

还有博主叠加InsightFace换脸插件,用Gen-2记录了儿子的夏天:

‍‍‍‍

这配色、这转场、这构图、这配乐,韦斯·安德森本人来了都要直呼内行。

云雾缭绕的国风山水画更是不在话下:


还有网友生成了弹吉他的摇滚泰迪:


看到这,相信有很多玩家都已经跃跃欲试了。实际上,用Runway生成视频的操作十分简单。

首先进入Runway官网(地址:https://runwayml.com/)。


点击“Try Now”或者“Try Runway for Free”,注册并登录(可以使用国内邮箱注册)。注册即送105秒免费额度,每个视频4秒,可以生成26个视频。



然后点击首页的“Start with Image”或“Start with Text”,进入文生视频 / 图生视频的页面。



这里,“头号AI玩家”输入的Prompt是:

a cat wearing sunglasses and pink suit
一只戴着墨镜,穿着粉色西装的猫。

点击“Generate 4s”生成,等待几分钟,就得到了如下视频,点击视频右上角即可下载到本地。


免费额度用完或者想体验去水印、提升分辨率等功能,就需要付费使用。付费计划最低一个月15美元,一年144美元。


在无提示词模式下,有网友将Gen-2与Pika和Genmo进行了比较。但从整体效果上来看,Gen-2在画质清晰度、视频流畅度、光影效果方面都更胜一筹。

而相比于前段时间大火的AnimateDiff+ComfyUI+ControlNet工作流,Gen-2生成动漫视频的效果稍微有些逊色。

但由于AnimateDiff非常吃显卡和内存,如果没有特殊需求,Gen-2依然是一个更具性价比的选择。


Gen-2的迭代历程


Gen-2从今年3月开始测试,6月正式发布,截至目前已经进行了多次更新。


7月,Gen-2推出“无提示词模式”,上传一张静态图,无需输入提示词,AI就能自动生成视频。



该模式一经上线,就涌现了大量用Midjourney出图,用Gen-2让图片动起来的有趣案例,比较出圈的作品有《芭本海默》《流浪地球3》预告片等。


8月,Gen-2生成视频的最大长度从4秒扩展到了18秒,这使得用户在创作视频时有更多的时间和空间来表达自己的创意。


9月,Gen-2新增“Director Mode”(导演模式),允许用户控制“镜头”的位置和移动速度,以实现更精确的影像效果。


用户可以通过添加图像到Gen-2并点击"Motion"按钮,然后选择“Custom camera control”来进入导演模式。在导演模式下,用户可以自定义相机的移动方向,包括水平、垂直、缩放和旋转等,还可以调整移动的速度。



随后不久,Gen-2又新增了“Motion Slider”的功能。用户可以根据自己的需求和创意,通过调整Motion Slider的数值(1-10),调整视频的动作幅度。较小的值会减小动作幅度,较大的值会增大动作幅度。




创意软件1.0时代已死


Gen-2更新后,Runway的创始人兼首席执行官Cristóbal Valenzuela在X上表示:“创意软件已死,这是一个时代的结束,也是另一个更振奋人心的时代的开端。”


他进一步解释说,在创意软件1.0时代,人们把任务划分为视频编辑、图像编辑、3D、音频编辑、混合渲染等高度专业化的细分领域。



但在创意软件2.0时代,我们只需要有好的灵感、创意,然后通过机器和模型去呈现,每个人都是编导。人们将不再受限于专业知识的缺乏,而将受制于想象力的缺乏。最成功的创作者将是最具有想象力的。


上个月,Runway举办了一场为期48小时的AI短片大赛,要求75%的内容都由Runway制作,场景、人物等在官方给定的几个选项中选择。


大赛最终评选出了8支获奖短片,并于11月3日在大赛官网布。


前方大片密集预警⚠️:


🥇《2026》- Dan Hammill & Jeff Wood



🥈《The Myth》- Hilario Abad, Javi Leria & Esteban Diba



🥉Trailer for Kowloon Night and Fog》- Shang Zhu



🎭 最佳角色奖《Let Us Explore》- Gabe Michael



⛲️ 最佳工艺奖《Under Siege》- Seif Abdalla


📝 最佳叙事奖《Balloons》- Daniel Scott Cribbs



由于视频上传数量限制,感兴趣的玩家可以去大赛官网(http://gen48.runwayml.com)观看其余视频。‍‍‍


这些作品都是用升级前的Gen-2或者Gen-1制作的,就已经达到了这等水准,如果使用升级后的Gen-2,估计视频质量还会更上一层楼。


而且,由于比赛要求75%的视频内容都要用Runway制作,参赛者使用的工具大多局限于Runway,如果可以调用更多工具,可能会有更出彩的作品。


相比于AI绘画,AI视频在复杂性上高了整整一个维度。但用AI生成视频,并非单纯地炫技,让画面动起来,也不是一味地追求画面清晰度和逼真度,一个好的电影短片还需要有引人入胜的叙事、分镜、配乐和配音。


虽然目前AI视频工具的能力离实现普通人的电影梦,还有一段距离,但对于影视和创意行业而言,一个崭新的创作时代正在来临。




更多AIGC有关内容,请持续关注“头号AI玩家”,期待更多AI从业者与我们交流,选题爆料/联络采访/投简历/投稿可添加主编微信zhangjie74510,进AI玩家群可添加小药丸微信banggebangmei,添加微信请备注姓名-行业/公司。


「头号AI玩家交流群」进群方式:添加微信“banggebangmei”并备注姓名+职业/公司+进群,欢迎玩家们来群里交流,一起探索见证AI的进化。
也欢迎围观小红书@头号AI玩家,我们在这里日常练习AI绘画。
欢迎分享、点赞、在看
 一起研究AI
继续滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存