輕量化大模型 AI硬體第一年的新趨勢

Mondo 汽車 更新 2024-02-02

據最新報道,Facewall Intelligence推出了最新旗艦端AI大模型MINICPM-2B,引數規模達20億,精選資料1TB用於訓練。 在多個主流評測列表中,MINICPM-2B的中英文平均成績均超過開源MISTRAL-7B。 此舉引發了業界對小型車型的關注和討論。

事實上,AI行業對小模型的定義並不統一。 有人認為只有幾十億個引數的模型應該叫“小模型”,而另一些人則認為,1-30億個引數的模型更適合叫輕量級大模型或嵌入式大模型。 目前主流開源模型大多有70億和130億個引數,而Meta發布的Llama 2系列模型最大引數數只有700億。

在AI模型之外尋找一條新路,或許是Microsoft在AI時代掌控自己命運的最佳選擇。 對於那些沒有條件“依賴”OpenAI大模型的公司來說,Microsoft的做法似乎是乙個啟示——在業界普遍關注超大規模引數數量的時候,反其道而行之的“小模型”似乎正在成為All in AI大模型的“退路”。

“小模型”的優點是節省資源、電力、金錢和時間。 與引數尺度大的LLM相比,“小”模型最大的優點是更“經濟”,不僅省電、省錢,還省時。 而這個“省”的特點,也注定會讓小尺寸的車型更容易落地,更容易賺錢。

此外,金融行業對輕量化大模型的態度非常積極。 出於安全和私隱方面的考慮,金融行業無法接受基於公有雲的大模型,有些場景需要私有雲,而另一些場景則需要AI在離線裝置上執行。 因此,具有本地化部署能力的輕量級大模型更受金融行業的青睞。

汽車也是AI模型的重要落地場景。 隨著新能源汽車的快速發展,車機系統有機會變得像手機一樣無所不能。 這也導致不少手機廠商轉型到汽車製造,以期通過手機的產品思維跨境搶占新的終端市場。 但是,主流的基於雲服務的大型車型,如果要上車,難免會受到網路環境的限制。 因此,在很多大型AI模型“上車”的場景下,離線執行的能力顯得尤為重要。 這也為輕量化車型在車載系統方面提供了大量機會。

金融圖書館網綜合編輯)。

kecai.co

相關問題答案

    數字孿生中的模型優化 輕量化和格式轉換

    數字孿生中的模型優化。數字孿生作為一種新的應用技術,已逐漸在製造業和建築業中得到廣泛應用。在數字孿生應用中,模型優化是該過程的關鍵環節,可以顯著提高數字孿生系統的效能和準確性。在本文中,我將詳細介紹數字孿生中的模型優化,重點介紹兩種常用的優化方法 模型輕量化和模型格式轉換。模型輕量化是數字孿生中最重...

    三維模型頂層合併構建的輕量化技術方法探討

    超大場景傾斜攝影的D模型的頂層合併往往會產生大量的資料,這給儲存 傳輸和處理帶來了很大的挑戰。為了解決這個問題,可以採用輕量級處理技術來減小資料量,提高處理效率,方便後續應用。在本文中,我們將分析幾種常見的輕量級處理技術。.幾何簡化。幾何簡化是一種常用的輕量化技術,它通過減少 D 模型中的頂點和麵片...

    新火種AI哄大模型的流行,給了普通人破掉AI創業的關鍵

    作者 一。編輯 美美。人們似乎更喜歡將人工智慧作為玩具而不是工具。最近,一款名為 Coaxing Simulator 的 AI 原生應用程式風靡一時,在一天內吸引了 , 名使用者。哄哄模擬器設定了各種情侶吵架場景,不管你是男是女,都可以讓AI在這裡扮演你的男朋友或女朋友,根據你的低情商或高情商回覆,...

    AI大車型時代純電動智慧型SUV新標桿,Model Y已成為過去!

    事實上,它是與吉利聯合打造的高階智慧型汽車機械人新品牌,其首款車型極躍與沃爾沃 極星一樣,都是基於C浩瀚平台打造的,在座艙智慧型化 高階自動駕駛 安全性等方面的表現超乎想象,顛覆了以往對智慧型純電動SUV的認知。正好最近對極悅的價格進行了調整,極悅MAX的當前價格是萬元,MAX遠端版售價萬元,MAX...

    擁抱AI大規模模型應用創新的春天

    計算機會思考嗎?自從英國數學家圖靈在年的一篇著名文章中提出 人工智慧 AI 的概念以來,人類在人工智慧領域從未停止過。年底,ChatGPT上線,在語音影象識別 自然語言理解等複雜任務中表現良好,帶動了年基於海量資料量和知識庫構建的大模型的爆發式增長。如果說年是AI模式的元年,那麼年則有望成為AI應用...