就在昨天，Sora又有全新「神作」炸出了！
兩位Sora作者，Bill Peebles、Tim Brooks紛紛甩出全新圖片。 （順便還秀了一把基友情？）
「一隻小熊貓和一隻巨嘴鳥是最好的朋友，在藍色時刻漫步在聖托里尼島」，Peebles稱這個場景簡直就和兩人走到OpenAI辦公室的畫面一模一樣。
a red panda and a toucan are best friends taking a stroll through santorini during the blue hour
這段影片的連貫性簡直令人驚呼：在每一格中，小熊貓和巨嘴鳥的形象始終保持一致性。
當然仔細看還是有不少破綻。例如小熊貓的腿有時會交織在一起，畫面看起來更像卡通圖像，而不是逼真的現實世界。
但總的來說，這種影片品質已經足以讓我們對AI影片的未來放飛想像。
有網友立刻做出了配音版，貼切的配音一出，影片更有那個味兒了！
難怪好萊塢大導Tyler Perry直言，自己在看完Sora製作的影片後，直接擱置了自己影師工作室8億美元的擴建計畫！
更多「神作」來襲
這次兩位作者放出的第二批視頻，效果更加逼真、更加爆炸。
網友們接連不斷發出驚嘆：Sora是怎麼做到一次比一次迭代得更好的？
這個影片是「一名潛水員發現了一艘隱藏的未來沉船，裡面有控制論海洋生物和先進的外星技術」。
a scuba diver discovers a hidden futuristic shipwreck, with cybernetic marine life and advanced alien technology
潛水員、海底景觀、沉船外殼、內部的外星技術都生成得十分逼真。
當然，這個場景也不是100%完美。立刻有人發現破綻——
例如，潛水員沒有擺動腳蹼就能遊動起來，也沒有吐出氣泡。
一位好萊塢電影製片人吐槽說：人的動作看起來沒有靈魂，有些像殭屍。
但對於不那麼挑剔的觀眾，這個20秒影片的品質已經夠了。
有人滿意地說：看起來像《深海爭霸戰》的高解析度版本
在以往，這個場景無疑是耗資巨資。而現在，好萊塢大片中燒金的高難度場景，都可以用Sora影片取代了，AI淘汰影視產業真不是說說而已！
這條閃著珠光的銀色鱗片、有著冰藍的眼睛和象牙龍角、吐出白氣的小白龍，也讓網友們驚呼，太太太震撼了！
Close-up of a majestic white dragon with pearlescent, silver-edged scales, icy blue eyes, elegant ivory horns, and misty breath. Focus on detailed facial features and textured scales, breath. Focus on detailed facial features and textured scales, set ablstur softly setly
它的擬人化做得很好，眼睛水汪汪的，傳達了非常動人的情感，彷彿能聽懂人話一樣。
《權力的遊戲》中的龍，是這樣的。跟它比起來，小白龍的差距並不太大。
有的網友表示，自己對這條小白龍愛不釋手，直接給它配了個音——
於是一場配音大賽開始了。
現實場景，是給Sora最難的考題。
下面這個「一個男人在夏威夷熱帶水域上空定點跳傘，寵物金剛鸚鵡在旁邊飛翔」的視頻，Sora再次交出了讓人印象深刻的答案。
a man BASE jumping over tropical hawaii waters. His pet macaw flies alongside him
場景如此逼真，直接有人發問：「是真的影片還是AI做的？」
配上音後是這樣的，就問會有多少人發現──這並不是真實的場景？
如果非要找茬，就是金剛鸚鵡的照明不太對，看起來像是單獨做出來的動畫，並不像自然條件下的光照。
定點跳傘的動作生成得不夠準確，降落傘太小。
下面是一隻玻璃烏龜，裂縫用金繕工藝修復，在日落時分走在黑色的沙灘上。
畫面的一致性很完美，沙子的物理特性也完全還原出來了。
不過美中不足的是：烏龜似乎只有三條腿？ ?
也有人發現「華點」：把沙丘做出崎嶇不平的樣子，是為了讓海龜爬過沙丘後不會留下痕跡嗎？
相較之下，Midjourney生成的玻璃烏龜是這樣的，別有一番風味。
精美的紙藝術世界中的一艘船，海面還有海洋動物躍出。
in a beautifully rendered papercraft world, a steamboat travels across a vast ocean with wispy clouds in the sky. vast grassy hills lie in the distant background, and some sealife is visible near the paperface ocean’s ground, and some sealife is visible near the paperface ocean’s 1perface
黑暗的霓虹燈雨林裡，閃耀著奇幻的動植物。
a dark neon rainforest aglow with fantastical fauna and animals
不過對於這個視頻，也有人挑刺說：「這是我見過的Sora最差的demo，它不知為什麼就生成了向量動畫的風格。」
一隻戴著眼鏡的貓，出現在20世紀60年代的諜報電影中。
cat in glasses in a 1960s spy movie
黃昏時分，一隻巨大的半透明水母優雅地飄浮在荒蕪的城市中，還是用35毫米膠卷拍攝的超現實場景。
A surreal scene unfolds as a giant, translucent jellyfish floats gracefully through a deserted cityscape at dusk. The scene is shot on 35mm film
這是一個精心製作的立體模型：江戶時代，在木造建築前，一個孤獨的武士慢慢穿過小鎮。
A meticulously crafted diorama depicting a serene scene from Edo-period Japan. Traditional wooden architecture. A lone samurai, clad in intricate armor, walks slowly through the town
一隻戴著護目鏡的小胖哈巴狗，坐在一輛舊摩托車旁的凳子上。
仔細看可以發現，狗狗肚子一呼一吸的樣子，顯得非常真實。
a small chubby Pug dog in goggles is sitting on a stool next to an old motorcycle
一隻棕色邊牧戴著墨鏡，滑著滑板。
a brown and white border collie stands on a skateboard, wearing sunglasses
可怕的事來了，有人在底下留言稱，棕色邊牧是自己的狗，這個影片是自己拍的。
而我們，竟然有那麼一刻恍惚了：他說的究竟是真是假？
總之，網友們迫不及待地等待公測了。
還有人給Sora出了神考題——「一部手機正在直播進入黑洞的過程」。
網友猜測：虛幻引擎被用來產生部分資料集？
隨著這些影片被放出，網友心中的疑問也越來越強烈——
Sora模型究竟是用什麼資料訓練的？
不少網友也覺得，怎麼Sora生成的畫面，看起來有些似曾相識？彷彿就是直接用虛幻引擎（Unreal Engine）做出來的一樣。
隨後，越來越多人公認：Sora訓練的資料集，應該是用UE產生的。
其實，在Sora剛誕生時大佬就紛紛預測——Sora是由遊戲引擎提供支援的。
Pytorch聯合創始人Soumith Chintala就這麼認為。
資料科學家和機器學習工程師Ralph Brooks也給了自己的分析：
如果要創建大量不同角度的高清視頻，就需要進行模擬。其中，有許多線索讓我相信，UE5在某種程度上就是用來創造訓練資料的。
例如這段廣為人知的櫻花漫步影片中，人物移動的方式跟UE5非常相似。現實中的人走路是不會用恆定速度的。
英偉達高級科學家Jim Fan同樣表示，「如果Sora接受過大量UE5合成資料的訓練，我不會感到驚訝的！」
當然，它可能沒有明確調用UE5，但非常有可能將UE5產生的文字、視訊對作為合成數據，添加到訓練集中。
早有預言帝猜中，Sora的推理管道是用的CLIP底座、文本轉3D對象，和遊戲引擎模擬。
果然，「人工訓練資料耗盡」不會阻止LLM的發展，合成資料才是AI的未來！
「精簡版」體驗，就藏在技術報告裡！
網友們看到這些世代比一代強的demo，已經心癢難耐了。
好消息是：雖然Sora還沒有正式開放功能，但在技術報告裡，已經可以小體驗一把了！
報告網址：https://openai.com/research/video-generation-models-as-world-simulators
透過選擇不同的關鍵字，例如人物、衣著、天氣環境、地理位置等選項，就可以體驗Sora生成的不同影片。
這樣我們就可以看到──a穿著b樣子的衣服，在c地點的d天氣下，愜意地散步。
好萊塢大佬直言很害怕，影視業真完蛋了？
這也難怪，好萊塢知名導演、製片、演員Tyler Perry因為Sora，決定擱置自己亞特蘭大工作室耗資8億美元的擴建計畫。
本來，Perry導演在過去四年裡，一直計劃斥資8億美元擴建自己的工作室，為佔地330英畝的土地增加12個攝影棚。
然而，在2月16日看過Sora做出的影片後，他決定撤銷自己的8億美元計劃，因為他拍攝的大片中，可能並不需要找取景地，或者搭建實景了。
「以前，我們只是被告知AI可以做這些事，但是真的看到它做出來的場景，還是太令人震驚了！」
Perry導演表示，因為Sora給自己帶來的衝擊太過強烈，8億美元擴建計畫已被無限期延後。
現在，拍電影時再也不需要親自前往拍攝地點了。
不論是想要科羅拉多的雪地場景、月球上的場景，還是山中客廳中拍攝兩個人的場景，都再也不要搭建真實佈景，只要在辦公室的電腦上，就能完成一切！
而這也意味著，巨大的變化將波及產業的每個角落，影響演員、燈光、運輸、音效和剪輯等所有從業者的飯碗。
現在，Perry導演已經在兩部電影中的現場拍攝和後期製作中使用了AI，避免了耗費數小時給演員畫老年妝。
Sora的出現徹底改變了遊戲規則。
在以往，HBO的試播可能需要耗資1500萬、2000萬甚至3500萬美元，而現在，這個成本低到不可想像。公司顯然會選擇成本較低的方案。
在不遠的將來，很多工作都會消失。
影視業該建立怎樣的安全防護措施，保住大家的飯碗？
參考資料：
https://www.hollywoodreporter.com/business/business-news/tyler-perry-ai-alarm-1235833276/
Going to share a few videos I made with Sora today.
Video generated by #Sora pic.twitter.com/X1zUXWZUgv
— 💀 Joe Taylor 💀 (@JMT3) February 24, 2024
best friends 😊
"a red panda and a toucan are best friends taking a stroll through santorini during the blue hour"
Video generated by #Sora pic.twitter.com/z5w9mi7wXi
— Tim Brooks (@_tim_brooks) February 24, 2024
"a tortoise whose body is made of glass, with cracks that have been repaired using kintsugi, is walking on a black sand beach at sunset"
Video generated by Sora pic.twitter.com/hm7KnAsHIj
— Aditya Ramesh (@model_mechanic) February 24, 2024