英伟达布局AI视频,Sora风头快被抢完了
鱼羊 一水 发自 凹非寺
量子位 | 公众号 QbitAI
英伟达投的Sora竞品,服务器又双叒被挤爆了!
来自Luma AI的“下一代”文生视频模型Dream Machine,新功能一上线,网友们再次玩疯。
经典表情包到瑞克摇的丝滑转场,这不第一时间就被安排上了(doge):
△𝕏@Proper
具体来说,Dream Machine这次上新的是“关键帧控制”:
上传首尾两张图像,搭配简单文字说明,一些“奇奇怪怪”的新东西就嘭的诞生了。
新功能目前免费可玩,于是上线不到24h,网友们那叫一个脑洞大开。
玩到上头处,有网友已经忍不住想掏钱了:
伙计,我想你们这次已经拿到我的钱包了。
更多效果和脑洞,接下来一睹为快。
网友:我有一个大胆的想法
先来看一组官方输出。
新功能主打一个“自然衔接”,尤其擅长处理延时摄影,无论是自然风光还是人文景色,都能生成电影级画面。
Prompt:A timelapse of a colorful sunset(日落时分的延时摄影)
Prompt:A timelapse of the Eiffel tower from day to night(埃菲尔铁塔从白天到夜晚的延时摄影)
人物角色的刻画,也自然流畅。
Prompt:figure with glowing eyes and wings slowly turns in misty forest as camera pans around(当镜头四处移动时,眼睛和翅膀发光的人物在迷雾森林中慢慢转动)
在细节上也做得很好,比如控制烟雾效果:
A swirling tornado of teal smoke morphs into a ballerina spinning in golden light, camera pans smoothly from wide shot to medium frame(青色烟雾的漩涡龙卷风变成了在金色光芒中旋转的芭蕾舞演员,相机从广角镜头平稳地平移到中画幅)
不知道你有没有心动,网友们整活儿的心反正是挡不住了。
枪战片,get:
△𝕏@Craftian_BK
二刺猿也第一时间到达现场:忍者,变身!
△𝕏@sangunshixx
还有大佬结合ElevenLabs的语音生成能力,用Dream Machine的这个新功能直接整出了“狼人变身”的大片效果。
△𝕏@Uncanny_Harry
苹果宣传片,也有人整出来了(doge):
△𝕏@Pierrick Chevallier
上手实测
看完这些惊艳众人的例子,那我们还不得赶紧上手试试~
一开始,我们用AI生成了带有量子位LOGO的图像,然后再用Luma生成电影片段。
直接访问Luma AI官网,在页面中央输入框的顶部上传首尾帧图像。
然后根据自己想象的画面输入提示词:
In a cool sci-fi blockbuster, the character slowly walks into the darkness, with the lights gradually going out.(一部酷炫的科幻大片,角色慢慢走进暗处,最后灯光熄灭)
最后静待生成,下面这个视频实测用时15分钟。
另外,由于昨天刚好是马斯克53岁生日,我们也借老马自己放出的30年前旧照浅试了一下。
The transformation of a person over 30 years.(体现一个人30年的变化)
不过也有一些“翻车”的例子。
Prompt:The young man goes upstairs, and the old man starts to enjoy eating watermelon cheerfully.(年轻男子上楼了,大爷开始愉快吃瓜)
结果看起来有点令人啼笑皆非,果然prompt是个技术活儿。(doge)
注意,由于涌入的网友过多,官方限制了每日生成次数。(每人每天5次)
关于Luma AI,据TechCrunch消息,截至今年1月份,该公司已融资超7000万美元。两轮融资中都有英伟达参投的身影。
One More Thing
有点巧的是,这边Luma刚上新,Runway版Sora(Gen-3)也对CPP(Creative Partners Program)创作者们开放了测试。
一大波实测视频正在刷屏中,效果be like:
(以上来自𝕏@arohaAIX)
据透露,目前开放的文生视频功能,单次最长可生成10s的视频。
看这样子,视频生成是真卷起来了,你觉得谁更有希望杀死比赛?
参考链接:
[1]https://x.com/LumaLabsAI/status/1806435502096310656
[2]https://x.com/dr_cintas/status/1806686604649459814
[3]https://x.com/arohaAIX/status/1806831217503080940
— 完 —
量子位年度AI主题策划正在征集中!
欢迎投稿专题 一千零一个AI应用,365行AI落地方案
或与我们分享你在寻找的AI产品,或发现的AI新动向
点这里👇关注我,记得标星哦~
微信扫码关注该文公众号作者