Runway踢馆Luma,重磅发布Gen-3 Alpha!10秒视频仅需90秒
夕小瑶科技说 原创
作者 | 海野
在AI视频生成的战场上,Sora、可灵、Luma轮番进行轰炸,力争头筹。Runway公司终于也憋不住了,直接扔大招:新的视频生成模型Gen-3 Alpha。
该模型最大的特点是:视频能生成复杂的场景变化、具备电影镜头质感和详细的艺术指导,保证了超高的视频精细度。
与上一代Gen-2相比,Gen-3 Alpha在视频和图像方面进行了联合训练,保真度、一致性和运动性显著提升。同时,该模型支持文本转视频、图像转视频、文本转图像的创作模式。
官方演示宣传片
在Runway推文中,官方接连放出十余个演示视频。涵盖了从人像和艺术设计,到运动镜头等多种风格的视频。话不多说,我们直接上正片。
事先声明,Runway官方表示,以下所有视频均使用Gen-3 Alpha生成,没有进行任何修改。
逼真人像的生成
从官方演示来看,Gen-3 Alpha擅长分析各种人类情感表现和动作表达,来生成富有表现力的人类角色,从而创作出具有张力的人物形象。
例如:
一位女士映在窗户上的微妙倒影。
Prompt: Subtle reflections of a woman on the window of a train moving at hyper-speed in a Japanese city.
一名男子被荧幕照亮的脸庞。
Prompt: A cinematic wide portrait of a man with his face lit by the glow of a TV.
一位宇航员在里约热内卢的小巷中奔跑。
Prompt: An astronaut running through an alley in Rio de Janeiro.
高精细的时间控制
此外,Gen-3 Alpha经过高强度描述性的专项训练,能够把握精确的关键帧,更适应运动镜头,实现场景中的元素过渡。
镜头由小到大,先给一只蚂蚁特写镜头,再拉到整个街区。
Prompt: An extreme close-up shot of an ant emerging from its nest. The camera pulls back revealing a neighborhood beyond the hill.
在手电筒照明下漫步在巷子中,墙上印刷着Runway的涂鸦。
Prompt: Handheld camera moving fast, flashlight light, in a white old wall in a old alley at night a black graffiti that spells ‘Runway’.
用铅笔描绘平面设计图的特写镜头。
Prompt: A pencil drawing an architectural plan.
更多艺术设计
Gen-3 Alpha还经过了各种风格的……艺术品的训练。
由碎玻璃组成的旋风。
Prompt: A cyclone of broken glass in an urban alleyway. dynamic movement.
由石头组成的人形生物。
Prompt: A man made of rocks walking in the forest, full-body shot.
未定的上线时间
Runway表示,他们正在新基础设施上训练一系列模型,而Gen-3 Alpha只是第一个,也是朝着构建通用世界模型迈出的第一步。
不过,看完了演示,想必大伙也就一个想法:急急急!快上线!
对于紧跟AI资讯的各位来说,每天都能吃的饱饱的:大厂画的饼、宣发人员的添油加醋、时不时还爆些瓜。
而在AI视频生成的众多模型中,我们都知道,Sora发完预告就无影无踪;Luma是前几天刚兴起,并且实装上线的为数不多的顶尖模型。也许是从Luma身上看到了挑战,Runway公司快马加鞭放出了Gen-3演示预告。
这次预告铆足了劲头,成功吸引了大众的目光。但Runway到底能不能接住这份流量,还是要看Gen-3 Alpha模型多久能上线了。它是下一个Sora,还是另一个Luma?
在我看来,接下来视频生成模型只会越来越多,越来越卷。如果不早点上线,不拿出更多创新点,那市场是不是都要被抢占光了呢?
参考资料
[1]https://twitter.com/runwayml[2]https://runwayml.com/blog/introducing-gen-3-alpha
微信扫码关注该文公众号作者