OpenAI放了个大招,好莱坞瑟瑟发抖!
(识别图中二维码,开启你的新车之旅)
话说大约两年前,以 Midjourney 为代表的文本到图像生成器风靡世界。但最近,文生视频也飞速发展进步,Runway和 Pika ,以及谷歌的 Lumiere文本到视频模型都各有千秋。
而就在今天,OpenAI 也放出了自己的大招,推出一种新的视频生成模型,名为 Sora。
据OpenAI介绍,Sora 能够创建“具有多个角色、特定运动类型以及主题和背景的准确细节的复杂场景”。此外,该模型可以理解物体“在物理世界中如何存在”,以及“准确地解释道具并生成引人注目的角色来表达充满活力的情感。”
并且,允许用户创建长达一分钟的逼真视频,简直是要颠覆影视创作。
那效果如何呢?
输入提示词:A movie trailer featuring the adventures of the 30 year old space man wearing a red wool knitted motorcycle helmet, blue sky, salt desert, cinematic style, shot on 35mm film, vivid colors.
一部好莱坞式的电影预告片就出来了。
还有下面这段“淘金热期间加利福尼亚州的历史镜头”,很难想象竟然出自AI之手。
再输入提示词:A Chinese Lunar New Year celebration video with Chinese Dragon.
看看是不是很有龙年春节的味道?各种人物的角色都表现的也很到位。
接下来,在看下面火车车窗上的倒影更是令人惊叹。
还有无人机的视角也是省却了很多现实电影中的拍摄步骤。
除此之外,也能模仿手机拍摄的镜头。
当你输入提示词:A beautiful homemade video showing the people of Lagos, Nigeria in the year 2056. Shot with a mobile phone camera.
一段AI生成的街拍视频就呈现出来了。
再输入提示词:Beautiful, snowy Tokyo city is bustling. The camera moves through the bustling city street, following several people enjoying the beautiful snowy weather and shopping at nearby stalls. Gorgeous sakura petals are flying through the wind along with snowflakes.
一段漫步在熙熙攘攘的东京街道,欣赏绚丽的樱花花瓣随着雪花随风飘扬的影片就完成。
看下面一只猫叫醒了熟睡的主人,感觉就是真人电影中的桥段。
同时,生成的视频中人物的细节也是非常惊艳。
输入提示词:An extreme close-up of an gray-haired man with a beard in his 60s, he is deep in thought pondering the history of the universe as he sits at a cafe in Paris, his eyes focus on people offscreen as they walk as he sits mostly motionless, he is dressed in a wool coat suit coat with a button-down shirt , he wears a brown beret and glasses and has a very professorial appearance, and the end he offers a subtle closed-mouth smile as if he found the answer to the mystery of life, the lighting is very cinematic with the golden light and the Parisian streets and city in the background, depth of field, cinematic 35mm film.
得到的就是下面的电影级别的人物特写。
再来一个“24 岁女性眨眼的极端特写”,这效果是不是很炸裂?
还有生成的动物也相当逼真,一只可爱的斑点狗透过一楼建筑的窗户向外张望。
而这张维多利亚冠鸽的特写镜头展示了其引人注目的蓝色羽毛和红色胸前羽毛。
还有一窝金毛幼犬在雪地里玩耍。
值得一提的是,用它生成的科幻片也不错,看下面赛博朋克背景下机器人的生活故事。
还有几只巨大的毛茸茸的猛犸象踏着白雪皑皑的草地走近。
而生成的动画片也会让迪士尼感觉有压力。
特写一个毛茸茸的小怪物跪在融化的红蜡烛旁边。怪物睁大眼睛、张开嘴巴凝视着火焰。这种天真和俏皮的感觉,就好像它第一次探索周围的世界一样。
还有一个美丽的剪影动画,展示了一只狼对着月亮嚎叫,感到孤独,直到它找到狼群。
只要你有足够的想象力,AI都可以帮你实现。下面逼真的特写视频,展示两艘海盗船在一杯咖啡内航行时互相争斗。
虽然Sora生成视频惊呆了无数人,但有时也有它不完美的地方。
比如一个人跑步的场景,有时会产生身体上不协调的动作。
还有下面这一位白发老奶奶站在彩色生日蛋糕后面,却无法吹灭生日蜡烛。
还有考古学家在沙漠中发现了一把普通的塑料椅子,但是椅子确是如同烂泥一样。
这是因为Sora 未能将椅子建模为刚性物体,导致物理交互不准确。
可不管如何,这终究是文生视频的又一次飞跃。
目前,Sora仅对评估模型潜在危害和风险的 “red teamers”开放。还允许一些视觉艺术家、设计师和电影制作人访问。普通人想要使用的话,估计还要等一段时间。
最后,来欣赏一下Sora生成的一分钟的长视频。
提示词为:A stylish woman walks down a Tokyo street filled with warm glowing neon and animated city signage. She wears a black leather jacket, a long red dress, and black boots, and carries a black purse. She wears sunglasses and red lipstick. She walks confidently and casually. The street is damp and reflective, creating a mirror effect of the colorful lights. Many pedestrians walk about.
今日话题:
你看好这个技术吗?
欢迎留言评论~
- END -
欢迎将文章分享到朋友圈
微信扫码关注该文公众号作者