編輯：Aeneas 好困
【新智元導讀】剛剛，Sora第二波影片放出了！穩定的一致性和模擬現實的逼真度，簡直讓人驚掉下巴。在好萊塢，已經有導演撤掉自己的8億美元工作室擴建計劃了。
就在昨天，Sora又有全新「神作」炸出了！
兩位Sora作者，Bill Peebles、Tim Brooks紛紛甩出全新圖片。（順便還秀了一把基友情？）
「一只小熊貓和一只巨嘴鳥是最好的朋友，在藍色時刻漫步在聖托裏尼島」，Peebles稱這個場景簡直就和兩人走到OpenAI辦公室的畫面一模一樣。
a red panda and a toucan are best friends taking a stroll through santorini during the blue hour
這個影片的連貫性簡直令人驚呼：在每一幀中，小熊貓和巨嘴鳥的形象始終保持著一致性。
當然仔細看還是有不少破綻。比如小熊貓的腿有時會交織在一起，畫面看起來更像卡通影像，而不像逼真的現實世界。
但總的來說，這種影片質素已經足以讓我們對AI影片的未來放飛想象。
有網友立刻做出了配音版，貼切的配音一出，影片更有那個味兒了！
難怪好萊塢大導Tyler Perry直言，自己在看完Sora制作的影片後，直接擱置了自己影師工作室8億美元的擴建計劃！
更多「神作」來襲
這次兩位作者放出的第二批影片，效果更加逼真、更加炸裂。
網友們接連不斷發出驚嘆：Sora是怎麽做到一次比一次叠代得更好的？
這個影片是「一名潛水員發現了一艘隱藏的未來沈船，裏面有控制論海洋生物和先進的外星技術」。
a scuba diver discovers a hidden futuristic shipwreck, with cybernetic marine life and advanced alien technology
潛水員、海底景觀、沈船外殼、內部的外星技術都生成得十分逼真。
當然，這個場景也不是100%完美。立刻有人發現破綻——
比如，潛水員沒有擺動腳蹼就能遊動起來，也沒有吐出氣泡。
一位好萊塢電影制片人吐槽說：人的動作看起來沒有靈魂，有些像僵屍。
但對於不那麽挑剔的觀眾，這個20秒影片的質素已經夠了。
有人滿意地說：看起來像【深海迷航】的高分辨率版本
在以往，這個場景無疑要耗費巨資。而現在，好萊塢大片中燒金的高難度場景，都可以用Sora影片替代了，AI淘汰影視行業真不是說說而已！
這條閃著珠光的銀色鱗片、有著冰藍的眼睛和象牙龍角、吐出白氣的小白龍，也讓網友們驚呼，太太太震撼了！
Close-up of a majestic white dragon with pearlescent, silver-edged scales, icy blue eyes, elegant ivory horns, and misty breath. Focus on detailed facial features and textured scales, set against a softly blurred background
它的擬人化做得很好，眼睛水汪汪的，傳達了非常動人的情感，仿佛能聽懂人話一樣。
【權力的遊戲】中的巨龍，是這樣的。跟它比起來，小白龍的差距並不太大。
現實場景，是給Sora最難的考題。
下面這個「一個男人在夏威夷熱帶水域上空定點跳傘，寵物金剛鸚鵡在旁邊飛翔」的影片，Sora再次交出了讓人印象深刻的答卷。
a man BASE jumping over tropical hawaii waters. His pet macaw flies alongside him
如果非要找茬，就是金剛鸚鵡的照明不太對，看起來像是單獨做出來的動畫，並不像自然條件下的光照。
定點跳傘的動作生成得不夠準確，降落傘太小。
下面是一只玻璃烏龜，裂縫用金繕工藝修復，在日落時分走在黑色的沙灘上。
畫面的一致性很完美，沙子的物理學特性也完全還原出來了。
不過美中不足的是：烏龜似乎只有三條腿？
也有人發現「華點」：把沙丘做出崎嶇不平的樣子，是為了讓海龜爬過沙丘後不會留下痕跡嗎？
相比之下，Midjourney生成的玻璃烏龜是這樣的，別有一番風味。
精美的紙藝世界中的一艘船，海面還有海洋動物躍出。
in a beautifully rendered papercraft world, a steamboat travels across a vast ocean with wispy clouds in the sky. vast grassy hills lie in the distant background, and some sealife is visible near the papercraft ocean's surface
黑暗的霓虹燈雨林裏，閃耀著奇幻的動植物。
a dark neon rainforest aglow with fantastical fauna and animals
不過對於這個影片，也有人挑刺說：「這是我見過的Sora最差的demo，它不知為什麽就生成了向量動畫的風格。」
一只戴著眼鏡的貓，出現在20世紀60年代的諜戰電影中。
cat in glasses in a 1960s spy movie
黃昏時分，一只巨大的半透明水母優雅地飄浮在荒蕪的城市中，還是用35毫米菲林拍攝的超現實場景。
A surreal scene unfolds as a giant, translucent jellyfish floats gracefully through a deserted cityscape at dusk. The scene is shot on 35mm film
這是一個精心制作的立體模型：江戶時代，木結構建築前，一個孤獨的武士慢慢穿過小鎮。
A meticulously crafted diorama depicting a serene scene from Edo-period Japan. Traditional wooden architecture. A lone samurai, clad in intricate armor, walks slowly through the town
一只戴著護目鏡的小胖哈巴狗，坐在一輛舊摩托車旁邊的凳子上。
仔細看可以發現，狗肚子一呼一吸的樣子，顯得非常真實。
a small chubby Pug dog in goggles is sitting on a stool next to an old motorcycle
一只棕色邊牧戴著太陽鏡，滑著滑板。
a brown and white border collie stands on a skateboard, wearing sunglasses
可怕的事來了，有人在底下留言稱，棕色邊牧是自己的狗，這個影片是自己拍的。
而我們，竟有那麽一刻恍惚了：他說的究竟是真是假？
總之，網友們迫不及待等待公測了。
還有人給Sora出了神考題——「一部手機正在直播進入黑洞的過程」。
網友猜測：虛幻引擎被用來生成部份數據集？
隨著這些影片被放出，網友們心中的疑問也越來越強烈——
Sora模型究竟是用什麽數據訓練的？
不少網友也覺得，怎麽Sora生成的畫面，看起來有些似曾相識？仿佛就是直接用虛幻引擎（Unreal Engine）做出來的一樣。
隨後，越來越多人公認：Sora訓練的數據集，應該就是用UE產生的。
其實，在Sora剛誕生時大佬就紛紛預測——Sora是由遊戲引擎提供支持的。
Pytorch聯合創始人Soumith Chintala就這樣認為。
數據科學家和機器學習工程師Ralph Brooks也給出了自己的分析：
如果要建立大量不同角度的高畫質影片，就需要進行模擬。其中，有很多線索讓我相信，UE5在一定程度上就是用來建立訓練數據的。
比如這段廣為人知的櫻花漫步影片中，人物移動的方式跟UE5中非常相似。現實中的人走路是不會用恒定速度的。
輝達高級科學家Jim Fan同樣表示，「如果Sora接受過大量UE5合成數據的訓練，我不會感到驚訝的！」
當然，它可能沒有明確呼叫UE5，但非常有可能將UE5生成的文本、影片對作為合成數據，添加到訓練集中。
早有預言帝猜中，Sora的推理管道是用的CLIP底座、文本轉3D物件，和遊戲引擎模擬。
果然，「人工訓練數據耗盡」不會阻止LLM的發展，合成數據才是AI的未來！
「精簡版」體驗，就藏在技術報告裏！
網友們看到這些一代比一代強的demo，已經心癢難耐了。
好訊息是：雖然Sora還沒有正式開放功能，但在技術報告裏，已經可以小體驗一把了！
報告地址：https://openai.com/research/video-generation-models-as-world-simulators
透過選擇不同的關鍵詞，比如人物、衣著、天氣環境、地理位置等選項，就可以體驗Sora生成的不同影片。
這樣我們就可以看到——a穿著b樣子的衣服，在c地點的d天氣下，愜意地散步。
好萊塢大佬直言很害怕，影視行業真完蛋了？
這也難怪，好萊塢知名導演、制片人、演員Tyler Perry因為Sora，決定擱置自己亞特蘭大工作室耗資8億美元的擴建計劃。
本來，Perry導演在過去四年裏，一直計劃斥資8億美元擴建自己的工作室，為占地330英畝的土地增加12個攝影棚。
然而，在2月16日看過Sora做出的影片後，他決定撤銷自己的8億美元計劃，因為他拍攝的大片中，可能並不需要找取景地，或者搭建實景了。
「以前，我們只是被告知AI可以做這些事，但是真的看到它做出來的場景，還是太令人震驚了！」
Perry導演表示，因為Sora給自己帶來的沖擊太過強烈，8億美元擴建計劃已被無限期推遲。
現在，拍電影時再也不需要親自前往拍攝地點了。
不論是想要科羅拉多的雪地場景、月球上的場景，還是山中客廳中拍攝兩個人的場景，都再也不要搭建真實布景，只要在辦公室的電腦上，就能完成一切！
而這也就意味著，巨大的變化將波及行業的每一個角落，影響到演員、燈光、運輸、音效和剪輯等所有從業者的飯碗。
現在，Perry導演已經在兩部電影中的現場拍攝和後期制作中使用了AI，避免了耗費數小時給演員畫老年妝。
Sora的出現徹底改變了遊戲規則。
在以往，HBO的試播可能需要耗資1500萬、2000萬乃至3500萬美元，而現在，這個成本低到不可想象。公司顯然會選擇成本更低的方案。
在不遠的將來，很多工作崗位都會消失。
影視行業該建立怎樣的安全防護措施，保住大家的飯碗？
參考資料：
https://www.hollywoodreporter.com/business/business-news/tyler-perry-ai-alarm-1235833276/
https://twitter.com/JMT3/status/1761443473218240558
https://twitter.com/_tim_brooks/status/1761236971186438178
https://twitter.com/model_mechanic/status/1761198301482021084
