OpenAI突然发布Sora 2:好一个“AI版抖音”!
一手实测来了
西风 鹭羽 发自 凹非寺
量子位 | 公众号 QbitAI
Sora 1是AI生成视频,那Sora 2呢?
就在刚刚,OpenAI重磅上新,直接带来了依托Sora 2的一个AI版的“抖音”。
是的,就是一个完全由AI来生成视频的短视频平台。
上Sora 2效果,先睹为快。
prompt:“一个男人在桨板上做后空翻”,be like:
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
单看画面,很难分清是真的还是AI生成的,水花飞溅得自然,人的动作打眼儿一瞅也没有常见的肢体乱飞问题。
这段视频还带配音,如今的Sora 2,已正式升级为音视频同步生成模型。
用OpenAI的话说,Sora 1是AI视频生成的GPT-1时刻,而Sora 2直接跨越好几代来到GPT-3.5时刻。
Sora 2所主打的首先就是更能遵循遵守物理定律。
比如一个人玩滑板,腿部动作丝滑又连贯,几乎没有违和感:

多人画面的物理表现同样出色,一堆人打排球,球被拍打时的力度感十足,飞行轨迹自然:
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
有意思了,就凭现在AI视频的效果,与其说考验AI的生成能力,不如说在考咱们懂不懂物理,能不能发现破绽。
Sora 2的第二大卖点是可控性更强。涉及好几个镜头的复杂要求,它都能照着做,同时还能保持在整个虚拟世界的“逻辑一致性”。
吉卜力等各种风格都能生成。
Prompt:in the style of a studio ghibli anime, a boy and his dog run up a grassy scenic mountain with gorgeous clouds, overlooking a village in the distant background.(以吉卜力工作室动画风格呈现,一个男孩和他的狗朝着长满青草的风景优美的山间奔跑,山间伴有绚烂的云彩,远处背景中还能望见一个村庄)

此外,Sora 2还有一大卖点,可以将现实世界的元素直接“注入”到视频生成中。通过观察某人的视频,模型便能将此人植入到任何由Sora生成的环境中。
比如一只鸵鸟叼走了俺的帽子:
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
和新模型同步推出的“AI版抖音”,是一款依托Sora 2的iOS社交app,名就叫“Sora”。
在这款应用里,用户能创作AI内容、对他人生成的AI内容进行二次创作、在可自定义的信息流里发现新视频,还能通过“客串(cameos)”功能,经身份验证和捕捉形象,让自己或朋友进入Sora生成的环境。
对于最新AI玩具,网友纷纷表示鹅妹子嘤。还有网友艾特马斯克,催促赶紧升级:

不过也有网友担忧,以后网上的视频会不会真假难辨:

以及,还是老样子,想要玩得要邀请码……

第一批实测已出炉
量子位第一时间拿到邀请码体验了一波。

进入界面,首先就能看到一些网友整活的案例,下方就是此次Sora 2的输入框,支持上传图像,右侧设置可选择横屏、竖屏。

最新客串功能,可以选择艾特别人,加入你生成的视频中。

举个栗子,我们先艾特奥特曼本人,让他来跳段芭蕾舞:

两分钟不到,一段姿态优美、动作流畅,还带配乐的奥特曼舞蹈视频就get了,效果给打满昏!
顺便补充一句,我们用的还是中文提示词:
芭蕾舞演员@sama正在舞台上表演旋转。
不过缺点也有,那就是现在生成的视频画质有点低……
再看一下生成动漫风格的效果:
@rohan弹奏钢琴 @sama拉小提琴,两个人合奏一首音乐,要动漫风格的
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
毫克!都想给二位写八百字同人文了(bushi)
咳咳,言归正传,配乐逼真到完全听不出来是AI合成,多个角色之间的镜头切换也很和谐。
不过也不必担心客串功能被恶意使用,用户个人的肖像使用权,由用户自己决定,也能够随时查看或删除其他人用你肖像生成的视频。
我们再来康康网友们用Sora 2做出来的效果。
疑似打工人国庆放假前半小时的临终幻想,be like:
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
不过有一说一,这质感真的很电影级别,尤其是在皮肤细节和神态上处理得相当真实。
WOW!这个就很像咱们小时候看的动画片了。
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
1960s的黑白新闻报道也是手到擒来,颗粒状效果也是很有BBC那味儿了。
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
以及奥特曼其人的“一生”……短短几分钟,我们就已经看到了奥特曼骑鲨鱼、奥特曼飞机上跳踢踏舞、奥特曼超市0元购等一系列drama连续剧。
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
不过就刚刚我们提及的画质问题,其实也有解法——钞能力!只要你是ChatGPT Pro用户,就能抢先体验更高质量的Sora 2 Pro模型。
另外官方也透露,接下来还会继续发布Sora 2的API。
“AI版抖音”Sora APP发布
Sora iOS APP率先在北美地区启动初始推送。

整体来看更像是一个“AI版”抖音短视频平台。

OpenAI表示,Sora iOS APP旨在让用户与朋友共同使用,它为用户提供了工具与自主选择空间,用户能够掌控自己在信息流中看到的内容,并依托OpenAI现有的LLM研发了全新类别的推荐算法,用户可通过自然语言对其下达调控指令。
在“客串”功能的使用上,用户对自己在Sora中的形象拥有端到端的完全控制权,只有你能决定谁可以使用你的“客串形象”,且你可随时撤销授权,或删除任何包含该形象的视频。所有包含你“客串形象”的视频,包括他人创建的草稿,你都能随时查看。

现在,被客串最多的应该就是OpenAI CEO奥特曼本人。
玩法层出不穷,就差给大家拜年了。
One More Thing
当然,在Sora 2发布之前,快手旗下的可灵是AI视频应用更风靡的那一个。所以可灵和Sora 2对比如何呢?
有网友晒出Sora 2.0与可灵2.5 Turbo在同一个prompt下的效果对比:
这是Sora 2:
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
这是可灵2.5 Turbo:
视频链接:https://mp.weixin.qq.com/s/8XBiwudLRBBObq9sdDvRYw
你发现华点了吗?
参考链接:
[1]https://openai.com/index/sora-2/
[2]https://x.com/OpenAI
[3]https://x.com/LillyLiCT/status/1973131505133297903
