Sora給好萊塢的震撼，就在剛剛變成了現(xiàn)實(shí)！

幾天前，「OpenAI正在向好萊塢推銷Sora」的消息才剛剛傳出。

而今天一早，首批拿到Sora授權(quán)的導(dǎo)演、藝術(shù)家們，就已經(jīng)公開自己創(chuàng)作的最新短片了?？胺Q神速！

OpenAI為之配文——Sora初印象。

Hollywood，果然一夜之間變Sorawood。

OpenAI聯(lián)創(chuàng)Greg轉(zhuǎn)發(fā)了最經(jīng)典的一個(gè)勵(lì)志小短片——?dú)馇蛉恕?/span>

有網(wǎng)友稱，「Sora會(huì)把每個(gè)人都變成Steven Spielberg，它將永遠(yuǎn)顛覆好萊塢」！

還有人表示，「我的初步收獲是：（人類）創(chuàng)意方向是關(guān)鍵，而Sora的魔力在于將超現(xiàn)實(shí)帶入生活。我們是否正在進(jìn)入下一個(gè)新達(dá)達(dá)主義時(shí)代」？

Sora最新短片，究竟有多震撼？

我們來(lái)一一感受下。

害羞的孩子：「氣球人」雞湯短片

第一部是關(guān)于「氣球人」的勵(lì)志故事短片。

僅用1分21秒向人們傳遞了滿滿的正能量——「每個(gè)人都有那么一點(diǎn)兒獨(dú)特之處，讓他們與眾不同」。

鏡頭場(chǎng)景由小拉大，一位男子慢慢走向自行車，騎著車走在路上，直到視頻20秒的時(shí)，才看到男子的完整形象——「氣球人」。

接下來(lái)視頻中，講述了氣球人生活面對(duì)的一些挑戰(zhàn)。

比如，「有一次，女朋友非讓他去仙人掌店，給叔叔Jerry挑一份結(jié)婚禮物」。

正是「氣球人」的身份，讓他擁有了看世界不同視角的機(jī)會(huì)。

視頻后半部分，是氣球升空后，隨風(fēng)飄到世界各個(gè)地方去看、去聽、去感受。

整個(gè)短片看下來(lái)，完全是一碗雞湯，告訴我們「異」是上天賦予每個(gè)人的禮物，要積極面對(duì)生活。

值得一提的是，背后創(chuàng)作者來(lái)自一家多媒體制作公司（總部設(shè)在多倫多）的三人團(tuán)隊(duì)：Walter Woodman、Sidney Leeder和Patrick Cederberg。

他們分享道，「我們現(xiàn)在有能力擴(kuò)展我們?cè)?jīng)認(rèn)為不可能實(shí)現(xiàn)的故事」。

導(dǎo)演Walter表示，「盡管Sora在生成看似真實(shí)的事物方面表現(xiàn)出色，但真正讓我們興奮的是它創(chuàng)造完全超現(xiàn)實(shí)事物的能力。這是抽象表現(xiàn)主義的新時(shí)代」。

「來(lái)自世界各地的人們，有故事急于傾訴的人們，終于有機(jī)會(huì)向世界展示他們的內(nèi)心世界了」。

金色唱片：從地球原材料，到人類生活的時(shí)間膠囊

下面是由導(dǎo)演Paul Trillo生成的短片。他也曾是Runway Gen-2放出之后，首批用戶。

整體采用了快鏡頭的方式，以金屬人的視角探索世界。

從海底，到現(xiàn)實(shí)世界商店、圖書館、金字塔、懸崖，再到接近混沌的世界，還配上了動(dòng)感的音樂。

Paul Trillo是一位才華橫溢的多領(lǐng)域藝術(shù)家、作家及導(dǎo)演，他的作品曾受到《滾石》和《紐約客》等知名媒體的高度評(píng)價(jià)。

他已經(jīng)榮獲19次「Vimeo Staff Picks」獎(jiǎng)項(xiàng)，這是對(duì)Vimeo平臺(tái)上最優(yōu)秀短片的一種認(rèn)可。

Paul表示，「與Sora合作，我第一次感覺到作為電影人的自我釋放。不再受時(shí)間、資金或他人許可的限制，我能夠自由地探索和嘗試，以大膽和創(chuàng)新的方式進(jìn)行創(chuàng)作」。

他的實(shí)驗(yàn)性視頻作品，正體現(xiàn)了這種創(chuàng)作理念。

只有你不再簡(jiǎn)單復(fù)制舊的東西，而是創(chuàng)造新穎且不可能的想法時(shí)，Sora的能力才能得到最大發(fā)揮，讓我們有機(jī)會(huì)見證那些原本無(wú)法實(shí)現(xiàn)的創(chuàng)意。

就在剛剛，Paul又放出了自己與Sora合作的最新短片——「金色唱片」，也算是接上一個(gè)短片的續(xù)作。

這個(gè)紀(jì)錄片描述了，從地球的原材料到人類地球生活的時(shí)間膠囊。

Paul表示，制作過(guò)程是是把Sora生成的11個(gè)不同片段剪輯在一起。

網(wǎng)友評(píng)論道，「關(guān)于控制/保留率，你有什么可以分享的嗎」？

Paul表示，「現(xiàn)在還不能說(shuō)太多，但我可以說(shuō)，它的功能與眾不同，我盡了最大努力去打破它的美學(xué)風(fēng)格」。

「異種生物」紀(jì)錄片：飛豬來(lái)了！

再來(lái)看看，這個(gè)堪稱史詩(shī)級(jí)「動(dòng)物紀(jì)錄預(yù)告片」。

各種你沒有見過(guò)的異種生物，Sora僅憑想象，都造出來(lái)了。

貓有著魚一樣的尾巴、長(zhǎng)頸鹿有著鶴一樣的下半身、鯊魚突然多出了與章魚一樣的觸角、蜜蜂有著馬頭。

還有二師兄也變成了「飛豬」。

視頻中，簡(jiǎn)要介紹了從第一集，到第八集，分別將要深入帶你了解的異種動(dòng)物。

背后的創(chuàng)作者Don Allen III是一位跨領(lǐng)域的藝術(shù)家、演說(shuō)家和顧問(wèn)，曾在夢(mèng)工廠動(dòng)畫（DreamWorks Animation）開啟了他的職業(yè)路程。

他曾與眾多科技和娛樂巨頭合作，探索混合現(xiàn)實(shí)、虛擬現(xiàn)實(shí)和AI的應(yīng)用領(lǐng)域。

「我一直在創(chuàng)造增強(qiáng)現(xiàn)實(shí)中的異種生物，這些在我腦海中構(gòu)思的有趣組合，現(xiàn)在可以更輕松地原型化，然后再將這些3D角色完整地構(gòu)建并置于空間計(jì)算機(jī)中」。

Don提到，Sora非同尋常是其最大的優(yōu)勢(shì)，它不受常規(guī)物理規(guī)律或傳統(tǒng)思維方式的限制。

他表示，通過(guò)與Sora的合作，他的創(chuàng)作重心從「技術(shù)難題轉(zhuǎn)向了純粹的創(chuàng)意……開啟了即時(shí)可視化和快速原型設(shè)計(jì)的新世界」。

同時(shí)，Don也表示，「這讓我能夠更專注地投入時(shí)間和精力在更重要的地方……以及我期望我的角色所傳達(dá)的情感深度」。

夢(mèng)幻美人魚

大海中3位「美人魚」的短片，簡(jiǎn)直讓人驚嚇下巴。

他們身上透明，斑斕的鱗片，在太陽(yáng)照射下，給人一種如夢(mèng)如幻般的感覺。

Josephine Miller是倫敦Oraar Studio的聯(lián)合創(chuàng)始人及創(chuàng)意總監(jiān)。該工作室專注于3D視覺、增強(qiáng)現(xiàn)實(shí)和數(shù)字時(shí)尚的設(shè)計(jì)。

「Sora讓我能夠?qū)崿F(xiàn)多年來(lái)一直夢(mèng)想，但技術(shù)上無(wú)法實(shí)現(xiàn)的創(chuàng)意」。

「這種快速將想法以高品質(zhì)進(jìn)行創(chuàng)意概念化的能力，不僅對(duì)我的創(chuàng)作過(guò)程構(gòu)成了挑戰(zhàn)，也促使我在講故事的藝術(shù)上不斷改進(jìn)。Sora讓我能夠在更少的技術(shù)限制下，將想象力轉(zhuǎn)化為現(xiàn)實(shí)」。

用AI探尋人性

藝術(shù)家Alexander Reben在過(guò)去十年，深入到了一項(xiàng)獨(dú)特的探索中：通過(guò)AI挖掘人性中的幽默與荒謬。

他還手動(dòng)將AI生成的圖像轉(zhuǎn)換成三維模型，并將這些模型具象化于現(xiàn)實(shí)世界中，創(chuàng)造出一系列雕塑作品。

而下面的視頻中，通過(guò)與Sora的合作，Alexander實(shí)現(xiàn)了各種3D立體雕塑的藝術(shù)生成。

他表示，「我嘗試使用Sora作為開拓3D雕塑的新起點(diǎn)。我開始對(duì)攝影測(cè)量學(xué)（一種通過(guò)照片測(cè)量物體的技術(shù)）及其在雕塑中的應(yīng)用前景深感興趣。特別是，將視頻轉(zhuǎn)化為3D模型的可能性激發(fā)了我的好奇心，這不僅僅是技術(shù)上的突破，更暗示著將AI的應(yīng)用推向一個(gè)全新的維度」。

人類寄給外星人的地球名片

下面這則視頻講述的是人類與外星人的第三類接觸。

開篇就是一個(gè)鉆石在旋轉(zhuǎn)。

隨后出現(xiàn)的這個(gè)畫面，概念與「旅行者」號(hào)寄給外星人的地球名片非常類似。

它是由身兼音樂家、研究員、創(chuàng)意活動(dòng)家及多學(xué)科藝術(shù)家多重身份的August Kamp制作。

August解釋道，「Sora對(duì)我來(lái)說(shuō)是一個(gè)歷史性的轉(zhuǎn)折點(diǎn)。作為一個(gè)藝術(shù)家，我的視野一直受到想象力和實(shí)際條件之間矛盾的限制，得以如此直觀地打造和改進(jìn)電影級(jí)視覺效果，我感覺自己踏入了藝術(shù)的全新領(lǐng)域...我真的非常期待，隨著這些工具的發(fā)展，將會(huì)出現(xiàn)哪些新的故事講述方式」。

多元素組合

再來(lái)看看另一家創(chuàng)意機(jī)構(gòu)Native Foreign制作的短片。

這個(gè)視頻是由修鐘人，上個(gè)世紀(jì)大城市街景，酒吧喝酒男子對(duì)女子一見鐘情，海洋上浮起一輛汽車等多個(gè)元素組成的內(nèi)容。

總部位于加州洛杉磯Native Foreign，是一家獲得艾美獎(jiǎng)提名的創(chuàng)意機(jī)構(gòu)。

它因擅長(zhǎng)品牌故事講述、動(dòng)效和標(biāo)題的設(shè)計(jì)，以及先進(jìn)的生成式AI工作流程而聞名。

聯(lián)合創(chuàng)始人Nik Kleverov正利用Sora將「概念可視化」，并為品牌合作伙伴快速迭代創(chuàng)意。

他認(rèn)為，創(chuàng)意的敘述不再受預(yù)算的嚴(yán)格限制。

「我是那種喜歡用動(dòng)態(tài)思維來(lái)思考的創(chuàng)意工作者，因此在使用Sora時(shí)，我深感任何創(chuàng)意都能變成現(xiàn)實(shí)」。

Sora模型成本猜測(cè)

雖然以上這些測(cè)試效果的確驚艷，但所要花費(fèi)的成本，卻是難以想象的高昂。

最近的一篇來(lái)自Factoral Funds的報(bào)道中，估算了Sora模型在訓(xùn)練和推理時(shí)的成本。

文章highlight中介紹：

- Sora訓(xùn)練需要大量的計(jì)算資源，預(yù)計(jì)需要4211——10528個(gè)H100 GPU運(yùn)行一個(gè)月 

- 推理成本：一個(gè)H100 GPU大約，每小時(shí)能生成5分鐘的視頻。 

訓(xùn)練計(jì)算估算：從DiT到Sora的推算

根據(jù)OpenAI的報(bào)告，雖然可以獲取Sora的詳細(xì)信息有限，但可以基于DiT（Diffusion Transformers）論文的數(shù)據(jù)，將Sora看作是DiT在視頻生成方面的擴(kuò)展。

DiT-XL模型有675M參數(shù)，使用了大約1021 FLOPS的總計(jì)算量，相當(dāng)于大約0.4 Nvidia H100運(yùn)行一個(gè)月（或12天使用一臺(tái)H100）。

- 計(jì)算乘數(shù)：假設(shè)視頻以24fps編碼，1分鐘的視頻包含1440幀?？紤]到Sora的空間和時(shí)間壓縮，如果按DiT論文的8倍壓縮率，就可以得到180幀在潛在空間中的表示。

因此，相較于DiT處理圖像，處理視頻的計(jì)算量至少增加了180倍。

- 模型大小和數(shù)據(jù)集：估計(jì)Sora的模型參數(shù)數(shù)量遠(yuǎn)超675M。如果假設(shè)一個(gè)20B參數(shù)的模型，相對(duì)于DiT，計(jì)算需求增加了30倍。此外，Sora訓(xùn)練的數(shù)據(jù)集比DiT大很多倍，增加了數(shù)據(jù)集規(guī)模的乘數(shù)4-10倍。

綜合考慮，因此得出Sora訓(xùn)練所需的計(jì)算量。

推理與訓(xùn)練計(jì)算

推理與訓(xùn)練計(jì)算比較：訓(xùn)練計(jì)算是一次性的大量計(jì)算，而推理計(jì)算雖然較小，但隨著模型的廣泛應(yīng)用，會(huì)被頻繁調(diào)用。

平衡點(diǎn)是指花費(fèi)在推理上的計(jì)算量超過(guò)訓(xùn)練所需計(jì)算量的時(shí)刻。

基于DiT到Sora的推算，Sora每生成一段視頻的計(jì)算成本約為708×10^15 FLOPS，相當(dāng)于每個(gè)H100 GPU大約能每小時(shí)生成5分鐘視頻。

在生成15.3M到38.1M分鐘視頻后，推理計(jì)算將超過(guò)訓(xùn)練計(jì)算。

根據(jù)估算，YouTube每天上傳的視頻量約為43M分鐘，Sora這個(gè)平衡點(diǎn)在實(shí)際應(yīng)用中很快就會(huì)達(dá)到。

好萊塢淺試一把AI，觀眾先罵開了

顯然，不會(huì)用Sora的影視從業(yè)人員，是真的要out了。

好萊塢大導(dǎo)Tyler Perry已經(jīng)因?yàn)镾ora，撤掉了8億美元攝影棚擴(kuò)建計(jì)劃

OpenAI此前就早已向好萊塢發(fā)起攻勢(shì)，鼓勵(lì)電影制作人在新拍攝的電影中用上Sora。

但此前，對(duì)于打翻自己飯碗的AI，眾多好萊塢導(dǎo)演、編劇、演員顯然是不滿意的，他們?cè)l(fā)動(dòng)多次罷工。

且不說(shuō)好萊塢對(duì)于Sora的態(tài)度，觀眾們對(duì)電影中的AI是否買賬呢？

在最近的電影《魔鬼深夜秀》中，就已經(jīng)出現(xiàn)了AI創(chuàng)作的畫面——「骷髏跳舞」。

這些畫面會(huì)在電影虛構(gòu)的電視直播中，作為廣告播放。

對(duì)此，憤怒的觀眾們紛紛發(fā)起控訴。

對(duì)此，已經(jīng)有觀眾打出了一星評(píng)論——「到處都是AI，不要讓這成為開始，否則我們的娛樂中會(huì)充斥著狗屎。」

還有觀眾表示對(duì)于這部電影非常失望，號(hào)召大家不要為它花錢。

在他的留言區(qū)，有人勸他冷靜：「這只是電影中一個(gè)小元素，我們沒必要因此抵制整部電影，否定所有人的辛勤勞動(dòng)?！?/span>

隨著爭(zhēng)議和爭(zhēng)吵聲越來(lái)越大，編劇、導(dǎo)演卡梅隆和科林不得不發(fā)表澄清——

感謝出色的圖形和制作團(tuán)隊(duì)，為電影賦予了我們想要的70年代美學(xué)。其中三張靜態(tài)圖片，我們對(duì)其進(jìn)行了進(jìn)一步編輯，它們最終在電影中以非常簡(jiǎn)短的插頁(yè)式廣告出現(xiàn)。

另一部漫威電影《秘密入侵》，開場(chǎng)畫面是用AI創(chuàng)作的。

在這段畫面里，一艘氣勢(shì)磅礴的宇宙飛船來(lái)到了地球，隨著綠色的云層在城市上空不詳?shù)乇P旋，人類面孔變成了斯克魯人。

，時(shí)長(zhǎng)02:03

當(dāng)然，AI的畫面也有漏洞，比如Samuel L. Jackson的臉部不太準(zhǔn)確，倫敦天際線有兩個(gè)大本鐘。

同樣，這也受到了觀眾的強(qiáng)烈抵制。

而《真探：夜之國(guó)》的背景海報(bào)，也因?yàn)橐伤艫I生成被許多觀眾炮轟。

看起來(lái)，讓好萊塢真正擁抱AI，還有一段時(shí)間。