溫一宇觀察了乙個偉大的藝人。“感覺就像是另一場工業革命。 ”
這是幾天前OpenAI發布了一段由文字生成工具Sora製作的短視訊後,網際網絡上最常看到的評論之一。
根據 OpenAI 發布的調研和演示片段,它只需要給 Sora 幾十個字的文字指令,就可以生成一部長達一分鐘的短片,既有真人又有動畫,還有各種不同的主題和表現方式。
這意味著,在不久的將來,只要你有能力嘗試這個工具(很有可能需要付費),那麼,任何人都可以製作出自己想要的最好的作品,換句話說,影視創作的門檻並不是說它根本不存在, 但它確實被降低到最低限度。
“工業革命”也許太過頭條了。 不過,相較於目前流行的Runway、PICA等文字生成工具,SORA確實向前邁進了一大步——生成超過一定時間的**內容,也就是說,AI工具必須對我們生活的物理世界有相當的了解,或者至少具備模擬相關物理規則的能力。
這也是Sora讓世界感到驚訝的事情之一,不僅演示令人驚嘆,而且還能夠產生持續時間為一分鐘的**內容。
可以說,SORA的出現,再一次將AIGC的創作能力帶到了乙個新的境界,尤其是直接進入了人類創作的終極領域——專業級的**內容。
來源:Open AI 官網。
在過去的幾年裡,國內外影視公司紛紛在虛擬製片上投入巨資,試圖讓現實生活中的拍攝最終被虛擬實境所取代,然而,隨著AIGC工具的跨越式發展,這些前期投資高、學習使用成本極高的虛擬製片是否還有需求? 或者借助AIGC,虛擬製片也可以實現進一步的飛躍,從而迎來影視拍攝不再需要外景地,不再依賴後期製作特效的時代。
關於虛擬製片的反思:降本增效需要時間自2020年的《曼達洛人》帶動影視行業虛擬製片新技術以來,國內州長幾乎參與了影視產業化的革命浪潮,易宇觀察在多篇文章中反覆提及虛擬製片的特點。
“虛擬製片”的核心是將預製的數字場景投射到LED螢幕上,讓演員在“LED螢幕”(無論大小)前表演,該螢幕會隨著視點的位置而變化。
另一方面,虛幻引擎等遊戲引擎工具可用於同步影象輸出和攝像機跟蹤,這意味著你所看到的就是你在虛擬環境中拍攝時所得到的,就像你在現實生活中拍攝一樣。
曼達洛人拍攝場景。
繼《曼達洛人》《新蝙蝠俠》《龍族》等荷里活佳作之後,《流浪地球2》《天空之王》等國產電影,以及長**自製劇《雲羽》《狐妖小紅娘子》《清明江邊圖代》《花兒》等作品也採用了平台搭建的虛擬製片技術流程。 從過去兩年的快速發展和成品的最終質感來看,不難總結出當前虛擬製片的優缺點。
好處 – 提高效率並降低成本:虛擬製片可以減少實景拍攝的時間和成本,例如不必搭建布景、尋找地點等。
增強創意控制:虛擬製片可以實現任何場景和特效,無論現實世界條件如何,例如模擬從外太空到服裝環境的場景。
提高安全性:虛擬製片可以避免實景拍攝中的安全風險,例如射擊**、火災等。
虛擬製作與傳統製作。
缺點——技術門檻太高:虛擬製片需要專業的技術團隊和裝置,需要技術人員的技能。
缺乏創意:有人認為虛擬製片缺乏真人拍攝的質感和真實感,往往被形式化。
成本高:虛擬製片的前期投資成本高昂,需要大量的硬體採購、軟體流程優化和專業參與。
事實上,藝宇觀察(ID:yiyuguancha)在《虛擬製片從0到X,是時候反思》一文中也提到,當疫情擾亂了荷里活的製作流程時,虛擬製片確實起到了非常重要的補充作用。 但隨著這個階段的過去,很多大製作其實都回到了傳統的實拍流程,比如《沙丘》系列的高成本科幻大片,導演維倫紐瓦還是選擇了實拍,更何況是諾蘭的《奧本海默》,去年就好評如潮了。
沙丘》劇照。
同時,虛擬製片的高成本,其實也成為了流媒體平台難以過分依賴新技術的乙個原因,畢竟這樣的新技術需要規模化來分攤成本,但現實情況是,像Netflix這樣產出巨大的平台,沒有那麼多作品值得使用這種技術, 比如專門為全套虛擬製片平台打造的《1899》,一季後就被砍掉了,顯然高昂的技術投入已經成為沉沒成本。
那麼,像SORA這樣直接生成**文字的AIGC工具能否成為虛擬製片的替代品呢?
AIGC增強的虛擬製片可能是最終的答案,目前可能不是,也可能永遠不會。
無論AIGC再強大,也無法將真人演員的表演融入其生成的內容中,但在虛擬製片的流程上,一旦好用的AIGC工具真正問世,無疑會大大優化虛擬製片的準備流程和使用成本,兩者的互補性恐怕會成為趨勢。
就目前SORA的能力而言,不難總結AIGC工具在影視創作背景下的優勢:
首先,速度和創造力:AIGC擅長產生視覺創意並快速變化。 雖然 AI 生成的影象和 ** 缺乏專業 VFX 工作的質量,但它們擅長快速探索潛在的鏡頭或場景設計。 一旦創作者有了想法,他們需要做的就是輸入它,他們將能夠立即看到效果。
各大模特生成的“女人眨眼”的**。
其次,高適應性:通過對環境和數字資產進行基於文字的修改,AIGC提供了在生產過程中實現新的靈活性和動態調整的潛力。 正如 OpenAI 所展示的那樣,在不改變核心元素的情況下,你只需要調整與環境相關的提示詞,就可以直接呈現不同的變化效果。
第三,通用性:這種型別的AIGC無疑大大降低了傳統視覺特效培訓帶來的超高使用門檻,並可能讓較小的創作團隊甚至業餘愛好者參與到使用數字環境進行電影級製作的過程中。 對於真正有視覺特效經驗的專業人士來說,這樣的工具可以大大減少他們的工作量,畢竟視覺特效製作行業人力資源和工作量的嚴重不對稱已經是乙個全球性的問題。
結合 AIGC** 工具和虛擬製片的優勢,當您想象以下場景時,很容易看到兩者的強大功能:
資料來源:SORA技術報告。
1.前期預覽:導演對乙個場景有乙個視覺想法。 基於文字描述,人工智慧可以快速生成簡單但富有想象力的可用動態影象,幫助指導虛擬製片中的詳細環境構建和鏡頭列表。
2. 臨時創意修改:在 LED 環形螢幕等硬體上建立場景時,曾經這樣:“如果建築物有乙個哥德式風格的陽台會怎樣? 與其要求視覺特效人員從頭開始建立複雜的數字資產,不如使用人工智慧生成的影象來快速探索實際的想法,讓導演決定是否要使用這個場景。
3.增加多樣性:場景需要背景車輛或團體角色。 使用預製數字資產和人工智慧生成的無限多樣性的組合進行定製,可以快速填充場景,而無需昂貴的單獨建模和動畫。
事實上,甚至在SORA商業化之前,這種利用AI快速建立後期製作特效數字資產的創意方法就已經出現。 優酷在長安市畫面中的“唐地公案”,比如**、街景、建築物等,都是AI生成的,雖然不知道這部劇是不是也用虛擬製片的流程進行拍攝,但這個想法其實是一樣的,用AIGC工具完成了過去需要大量後期製作特效的內容。
唐帝公案劇照。
切換到虛擬製片,其實只是將AI的參與從後期製作轉變為前端,其更高效的特性可以有效地用於快速試錯,實現最終的畫面呈現。
當然,就像虛擬製片的成本需要被大規模使用來稀釋一樣,目前像SORA這樣的“尖端工具”使用起來也很昂貴,比如SORA生成一分鐘的長度,每秒30幀,按照TFLOPS的轉換大約相當於5500塊A100的同步計算能力,這大概也是為什麼SORA仍然只提供很小範圍的內部測試的原因, 然後發布很可能是訂閱。
無論是友愛騰芒投資搭建的虛擬製片工作室,還是市面上提供大量虛擬製片的後期製作公司,最直觀的問題之一就是,批量採購的硬體成本實際上已經投入,相應的生成流水線和流程已經開始磨合並形成生產力, 目前沒有理由直接停滯不前或放棄,等待AIGC成熟也是不現實的。
更重要的是,對於領導者來說,他們不可能在技術能力和主要資源方面完全投入到AIGC的本土發展中。
作為乙個直接面向使用者的平台,他們所要做的就是等待乙個足夠好的商業工具出現,在AIGC無法一鍵生成好劇本之前,作為內容提供商過度糾結於AI技術的質量沒有多大意義,觀眾最終只會為一部好劇或一部好電影買單。