嘉賓 |阮陳貴.
編輯 |張成.
2024年11月24日-25日，由51CTO主辦的“WOT全球技術創新大會2023深圳站”成功舉辦。 在“AIGC賦能商業”專題論壇上，趣丸科技高階研發工程師阮晨貴分享了《方丸科技廣告素材場景下AIGC賦能商業的探索與實踐》的主題，詳細介紹了AIGC技術在多模態材料中的作用、AIGC如何賦能廣告業務，以及趣丸科技AIGC的實際應用。
AIGC賦能廣告行業資料營銷和創意場景
廣告行業擁有巨大的市場份額。 艾瑞諮詢發布的資料顯示，廣告市場佔GDP總量的1%，並且還在持續增長。 AIGC的崛起將賦能數字營銷內容和創意場景，包括文生文字、文生圖、音訊、跨模態等。
阮晨貴在分享中表示，AIGC對應的文案和音訊可以很好地與廣告搭配，自然而然地為廣告業務而生。 對於多模態技術，可以更好地匹配廣告業務。 為此，趣味丸科技對AIGC在廣告行業進行了相關探索。
據介紹，在AIGC在廣告業務的深度應用中，生成和內容理解是比較重要的兩個方面。 在內容理解方面，阮晨貴認為，通過為AI提供**、文字、**等內容，AI不僅可以幫助人們分析**，還可以理解文字中的情感資訊，理解音訊中蘊含的資訊等，通過AI組織出他們需要的內容。
洞察內容的生成，逆向動作再生成內容，這個過程是Fun Pill技術在AIGC中對內容的更深入理解的應用。
程式化廣告和曲丸科技的素材特點
阮晨貴表示，產品投放包括準備期、測試期、擴充套件期、穩定期和衰減期五個階段，覆蓋廣告的整個生命週期。 創意與廣告是一體的，了解創意的商業特徵，就是理解廣告生命週期的過程。 由於廣告量的增加和廣告方式的日益多樣化，需要大量的材料，包括文字、**等材料。 因此，創意在廣告投放生命週期中起著重要作用。
基於此，曲丸科技研發了一款名為“Takeoff”的智慧型輸送系統，從基礎版到智慧型版再到物智化，歷時五年不斷迭代。
阮晨貴表示，我們希望能夠以智慧型的方式用所有素材搭建廣告，並不斷觀察資料是否符合預期，並與**進行互動進行轉化管理。 通過建立智慧型生成材料-材料監控-*效果反饋，將資訊和資源打通整合，形成閉環，最終作用於材料本身。
趣味丸科技將素材方向分為資訊流廣告和新**廣告。 所謂資訊流廣告，就是在朋友圈看到的各種軟硬廣告。 大多數硬廣播會將**、封面和文字顯示到乙個創意包中，並且不會指定具體內容。 新**廣告是小眾或更垂直的內容，通過推薦產品來吸引使用者。
隨著產品數量的增加，對材料的需求也隨之增加。 繁瑣的物料生產過程也帶來了人力和生產能力不足的問題。 此外，還存在大量史料無法有效利用的問題。 如何利用AIGC解決這些問題，成為曲丸科技的重點方向。
基於AIGC技術生成產品計畫
在材料數量上，曲丸科技將其分為歸一化材料和探索材料。 所謂歸一化材料，就是可以用固定正規化概括起來的一種材料形式。 探索廣告素材是原生型別的廣告素材，指的是新產品和新的定位模式。
阮晨貴認為，AIGC的突破點在於材料的結構化。
為此，曲瑪如科技通過產品解決方案提公升AIGC的商業效果，利用AIGC輔助製作，打通內容生產需求、素材採集、創意製作、流程製作、使用反饋的資料閉環。 一方面，對於正規化相對固定的內容生產，實現了全自動化、多執行緒的操作，大大提高了效率另一方面，通過引入AIGC輔助人類設計師進行創作，幫助設計師完成超材料創作，實現AIGC的優化和擴充套件最後，形成對材料元素的提取和拆解能力，實現元素級資料洞察。
據報道，起飛系統在整合AIGC能力的同時，具有獨立的原子能力。 它支援基於法學碩士的論文，包括短文案和長篇論文。 它具有理解AI混合和人臉融合優化效果的能力，並具有使用預設樣式和提示進行繪製的能力。 目前，起飛系統已提供AI指令碼生成、AI換臉、AI**混搭、AI**混搭、AI繪圖、短文生成、長篇論文生成等功能，並持續更新。
接下來，阮晨貴通過文生**、AI**混合編輯、AI廣告文案詳細介紹了三大代技術應用。
在文生代技術方面，從劇本創作到拍攝故事板，再到後期處理，AIGC在整個過程中無處不在。 AI不僅需要能夠理解和標註物質元素，能夠靈活地設定指令碼結構，還需要能夠對語義識別進行評分和推薦。 最後，需要有強大的後處理能力，幫助使用者從繁瑣的工作中解脫出來。
在故事板推薦技術方面，可以實現基於LLM和向量資料庫的AI故事板推薦。 此外，還可以充分利用ASR、OCR等基礎技術對素材中的音文內容進行識別，輸入大型語言模型進行標籤生成，將手動標註的標籤組合成一流的內容摘要，通過向量化模型進行嵌入。 最後，語義檢索（retrieval）輸出目標情節提要並加入混合過程。
據介紹，起飛系統在1分鐘內實現了50+**的輸出，物料佔比超過50%，ROI>2。 阮晨貴說，從研發到上市，我們承擔了所有成本。 目前，在底層邏輯不變的情況下，可以在一分鐘內生產50**。 當然，這也取決於投入的資源量，如果加上 CPU 或 GPU，可以生成更多**。
接下來的時間裡，阮晨貴詳細分享了AI**混搭和AI廣告文案生成技術的應用，這裡就不多說了。
談及未來的挑戰和規劃，阮晨貴表示，目前，曲丸科技已經實現了對元資料的實質性洞察。 未來，趣丸科技將重點探索所有資料與交付平台整體資料的聯動，希望在優化者提出需求時，系統能夠清楚地告訴他們應該使用哪些資料，使用哪些片段，使用哪些幀，甚至使用哪些秒， 使廣告空間達到最佳標準。
嘉賓介紹
阮晨貴曾就職於騰訊娛樂集團，從事社交軟體後端服務的研發工作。 目前為趣味丸科技廣告平台技術總監，負責程式化廣告系統的架構設計及AIGC在廣告創意物料中的應用。 2024年，阮晨貴專案“面向多模態AI資料應用的一站式管理平台”在中國資訊通訊研究院舉辦的“以資料為中心的AI以資料為中心的AI應用案例”徵集中被評為“優秀案例”。 此外，Nguyen在音訊處理、社交應用和廣告策略系統方面擁有8項發明專利。