身體長兩尺,面如靛藍,頭髮如硃砂,眼神兇猛,牙齒......電影《風神》中雷震子的造型令人嘆為觀止。 為了詮釋這種數字角色,空間計算動作捕捉技術派上了用場,不僅還原了真實的人體形態1:1,而且使動作和表情都栩栩如生。
這與Leyard Virtual Dynamic基於AI的空間計算技術的賦能密不可分。 在AIGC(Generative Artificial Intelligence)大幅提公升行業生產效率的當下,利亞德虛擬動力更是邁向了一步,進入了AI大模型,發布了自主研發的Lydia專業能力行動模型。 利亞德集團副總裁兼CMO、虛擬Motion Point首席執行官劉耀東在接受中國電子報記者專訪時表示,Lydia已經形成了空間動作資料的“認知、感知、生成”等核心能力,並率先在空間計算和動作生成領域探索AIGC的新模式。 並將在影視創作和動漫遊戲製作領域擁有廣闊的未來。
把“資料資本”扛成大模型
從PGC、UGC到AIGC,內容行業經歷了一輪又一輪的生產力變革。 雖然從PGC到UGC的演變犧牲了一定程度的專業性,但卻大大提高了生產效率。 AIGC同時解決了內容製作質量和製作效率兩大問題。
從需求來看,元宇宙和空間計算的概念火熱,內容行業已經處於爆發式需求的節點,需要高頻生產大量符合標準的內容。 AI大模型時代已經到來,背後是演算法、算力、資料的全面競爭。 演算法和算力可以通過人工訓練和擴充套件資料中心來解決,而資料資源需要分為兩部分。 網際網絡上充斥著**和文字,但三維空間資料卻非常稀缺。
劉耀東表示:“AI時代大模型發展的瓶頸不再是演算法的發展,而是資料的積累。 多年來,利亞德虛擬動態點在空間計算和動作捕捉領域積累了大量的運動資料,這也是利亞德虛擬動態點能夠開發大型運動模型的核心原因。 ”
記者了解到,Lydia動作模型的引數包括基礎資料引數和核心動作資料引數兩部分。 在基礎資料引數方面,Lydia參考了當今主流的大模型資料集,在自然語言理解的訓練模型過程中已經達到了數百億的規模。 在核心動作資料引數方面,擁有OptiTrack光學動作捕捉多年資料積累、無標記點動作捕捉資料沉澱、網際網絡動作資料提煉能力。 通過三種動作資料的積累,利亞德虛擬動點成功訓練了Lydia大模型的動作資料。
相較於耗資斥巨資在海量資料上訓練的大型模型,利亞德虛擬動力深耕空間計算和動作捕捉技術多年,擁有動作資料資源優勢。 劉耀東說。
聚焦場景,推動商用
通過輸入“蹲下、前走、轉身”等乙個或多個命令,Lydia大模型可以連續生成乙個簡單的動作、一組複雜的動作、一系列的特徵動作,完成主流渲染引擎平台的資料開通和呼叫。
在2023年底召開的新聞發布會上,記者見證了Lydia大模型對動作資料檔案的認知理解和描述能力。 業內專家評論稱,如果將這種模式用於某些影視機構的專業創作,或者用於個人博主的內容創作,那將如魚得水。
在通用模式遍地開花的當下,業界達成共識,成功落地大模式的行業主要有兩類,一類是設計、娛樂、遊戲等創意產業,二是金融、醫療、法律等高知識密集型產業。
談及動作模型開發之初Leyard Virtual Motion Point的整體設計和規劃,劉耀東說:“我們確實對大模型的定位做了很多思考。 Lydia是目前世界上為數不多的真正實現運動生成的大型模型之一,旨在解決某些場景,如影視創作、遊戲開發等。 ”
不同於其他通用模型,莉迪亞動作模型是一種專業能力模型,它不同於前者的能力特徵和應用領域,但能力互補,實現場景互補。 Lydia可以在空間計算領域實現對動作資料的認知理解,從而進行高效的動作生成,專注於對動作資料採集效率更重要的行業場景,如影視、電子商務、動漫製作、遊戲等。 同時,Lydia 還支援其他軟體平台進行連線和呼叫,使其生成的動作檔案可以被生態夥伴用於商業化。
目前,Lydia行動模型的生態合作圈“遍布全球”,不僅吸引了眾多領先的雲廠商,還吸引了大量的通用模型廠商和應用廠商。
據劉耀東介紹,利亞德虛擬動態點探索未來的合作方向之一,就是如何將Lydia大模型與通用大模型平台融合,實現資源的並行調動。
對於商業合作模式,劉耀東設想:“首先,在雲上,電影公司、大學、直播博主等使用者可以呼叫API來生成動作; 第二個是專案系統,它將動作模型私有化以解決使用者的特定需求。 ”
劉耀東表示:“未來,在Lydia大模型的商業化過程中,我們將首先將我們的部分能力發布給使用者試用。 通過這個過程,我們將盡最大努力加深大家對動作模型的理解,比如讓業界和大眾意識到動作模型可以有效提高電影創作中視覺呈現的準確性和製作效率。 ”
自2023年發布“一體三核”核心能力和發展戰略以來,以空間計算為主要戰略主體,以AI大模型、硬體裝置、空間資料為三核,利亞德虛擬動態在AI時代大踏步前進,現推出Lydia行動模型,加速AI能力體系提公升。 未來,利亞德虛擬動態將持續提公升科技創新的深度和準確性,加速AI大模型和空間計算應用的落地。 作者丨盧夢琪編輯丨邱江永梅編輯丨瑪麗亞製片人丨連曉東.