AI伺服器正處於風口浪尖! 算力關鍵賽道,布局領跑強 恆強

Mondo 科技 更新 2024-02-01

當前,全球AI布局加速,大量AI模型不斷湧現,模型的推出和迭代極大地帶動了上游對算力的需求。 隨著國內數字基礎設施對資料負載的需求不斷增長,中國AI伺服器市場正在加速增長。

從整體發展趨勢來看,各國密集出台大模型相關政策,資料、算力、演算法更新迭代步伐加快,共同帶動AI大模型效能提公升。

以AI伺服器為載體的算力是人工智慧的終端表現之一。 與算力掛鉤的儲運能力也將相應提公升,這將帶動硬體算力晶元(GPU、FPGA、AISIIC等)、儲存晶元、光模組、PCB、電源管理、散熱等的增長。 從歷史上看,整個行業將看到人工智慧伺服器滲透率的提高帶來的增長。

據TrendForce集邦諮詢預測,預計2024年AI伺服器(含GPU、FPGA、ASIC等)出貨量近120萬台,同比增長38臺4%,佔整體伺服器出貨量的近9%。 人工智慧

計算能力的提高直接帶動了對伺服器的需求。 AI伺服器作為解決算力的核心支撐,可用於支援本地應用和網頁,也可以為雲端和本地伺服器提供複雜的AI模型和服務。

AI伺服器採用異構架構,GPU數量遠高於普通伺服器。

從伺服器上游成本來看,晶元、記憶體、硬碟佔伺服器生產成本的近百分之七十。 推理伺服器的GPU佔成本的25%,訓練伺服器的GPU佔總成本的73%左右。

AI伺服器與普通伺服器的主要區別在於架構不同,AI伺服器採用CPU+GPU FPGA ASIC等異構架構,而普通伺服器一般採用CPU架構; GPU 數量差異很大,單個 AI 伺服器使用的 GPU 數量通常在 4 個以上。

GPU架構是主流的加速架構,是伺服器的核心成本組成部分。 GPU採用平行計算,適用於圖形渲染、機器學習等處理密集型計算,AI算力需求的增加進一步提高了GPU卡的計算速度和使用要求。

與一般伺服器相比,AI伺服器的增加主要是由於AI晶元和記憶體頻寬的大幅增加,相應的數值和其他配套元件也進行了不同程度的公升級。

據半導體行業觀察,以NVIDIA DGX H100為例,GPU板組(含HBM)價值佔比最高,達到73%,其次是儲存約佔5%,其中DRAM佔比3%,NAND佔比約2%。 GPU 和儲存加起來佔總數的 90%。

此外,隨著算力的提公升,對散熱的需求也相應增加,液冷技術的引入有望為散熱環節帶來新的機遇。

與一般伺服器相比,AI伺服器增加了GPGPU的使用,因此HBM使用量約為320 640GB,NVIDIA A10080GB配置為4或8幀。

未來,AI模型的逐漸複雜化將刺激更多的記憶體使用,同時推動對serverdRAM、SSD和HBM的需求增長。

AI伺服器GPU成本佔比較大:

據統計,2024年北美四大雲廠商Microsoft、谷歌、Meta、AWS佔AI伺服器採購總量的66%左右,海外雲巨頭對AI伺服器的需求更大,但隨著國內AI大模型的開發和應用帶動更多的AI伺服器需求,中國AI伺服器市場空間有望進一步增加。

近年來,國內AI建設浪潮持續公升溫,位元組跳動年度採購量佔62%,其次是騰訊、阿里巴巴。 5% 對比 15%。

據IDC資料顯示,在市場份額方面,浪潮資訊、新華社.

3、超融合位列2024年中國AI伺服器市場份額前三,市場份額佔比如下。 00%。

2024年,浪潮AI伺服器在全球權威AI效能測評大賽MLPERF中斬獲49項冠軍,以全面領先的AI訓練和推理效能為AI研發和應用提供強勁動力,其AI伺服器產品已應用於AI+科學領域的全球領先網際網絡巨頭和領先科技公司, AI+Graphics、AIGC等,成為全球最大的AI伺服器提供商。

浪潮資訊盈芯伺服器NF5688M6和配置:

中科曙光是中國領先的高階伺服器製造商。 公司高階伺服器產品為全棧自研,具有規模化部署實踐; 持續發展算力服務業務,通過國家綜合算力服務平台,加速海量複雜行業應用的創新落地,為國內多個大模型提供算力支撐。

AI伺服器布局廠商還包括中國長城、拓威資訊、同方股份等。 上下游環節參展廠商眾多,部分代表廠商包括中興通訊、科大訊飛、海康威視、360、瀾起科技、龍芯中科、神州數碼、海天瑞聲、東華軟體等。

目前,AIGC和雲計算等先進技術給各行各業帶來了巨大的變化和機遇。 在此背景下,作為支撐大規模資料處理和高效能計算的重要基石,超級計算的需求和應用場景也呈現出持續增長的趨勢。

超級計算與雲計算的結合,為伺服器市場帶來了新的增長點。 雲計算的彈性和可擴充套件性使超級計算資源更高效地服務於科學研究、工業設計、模擬和大資料分析等多個領域。 這種組合不僅提高了計算效率,還降低了使用成本,讓更多的機構和企業可以享受到超級計算帶來的便利。

與此同時,超算所需的AI高階伺服器也成為伺服器市場的新星。 AI伺服器具有更高的效能、更強的穩定性和更好的擴充套件性,可以滿足超算在計算速度和資料處理能力方面的嚴格要求。 隨著超級計算應用的不斷普及和深化,對此類高階伺服器的需求將持續上公升,有望帶動整個伺服器市場實現進一步增長。

關注樂清智庫,洞察產業格局!

相關問題答案

    PCB迎來高速爆裂!算力伺服器關鍵材料全面梳理

    近日,人工智慧領域的兩個新型多模態應用引起了廣泛關注。Pika和谷歌的原生多模態大模型Gemini持續高漲,成為全球關注的焦點。隨著人工智慧進入引數巨大的大模型時代,對算力的需求也在增加。這一趨勢為AI晶元和伺服器市場帶來了巨大的商機。由於對算力和伺服器的高需求,PCB 印刷電路板 行業也迎來了前所...

    PCB迎高速突破!算力伺服器關鍵材料全面梳理

    近年來,人工智慧的快速發展帶動了多模態應用的興起,其中PIKA和谷歌的Gemini成為全球關注的焦點。隨著人工智慧進入大模型時代,對算力和伺服器的需求也在不斷增加,給AI晶元和伺服器市場帶來了巨大的商機。在這種趨勢下,PCB行業迎來了前所未有的機遇。中國大陸現已成為全球PCB產值的一半以上,對伺服器...

    液冷伺服器需求激增,AI算力關鍵賽道全面梳理

    隨著人工智慧技術的快速發展,對算力的需求也在增加,這導致了對液冷伺服器的需求激增。由於AI晶元功耗大幅增加,過熱對伺服器效能產生嚴重影響,因此散熱和溫度控制問題迫在眉睫。液冷技術具有顯著優勢,可有效降低資料中心能耗,提高散熱效率,使伺服器執行溫度更加穩定。隨著裝置熱密度的增加,液冷技術將成為替代傳統...

    算力投入巨大 高階AI伺服器市場需求激增

    過去,一台 AI 伺服器可以容納四塊顯示卡,但現在客戶想要能夠容納八塊甚至十塊顯示卡的高階裝置。月日,在人工智慧技術日暨首屆人工智慧生態發展峰會上,伺服器廠商將展示全新公升級的AI大模型伺服器。中國第一報記者在現場了解到,AI大模型的迭代速度越來越快,廠商在智慧型算力方面的投入大幅增加,支援儲存和訓...

    由於對計算能力的投資,對高階AI伺服器的需求呈爆炸式增長

    隨著人工智慧技術的不斷發展,對高階AI伺服器的需求也在不斷增加。這種需求的增加主要是由於對計算能力的巨大需求。首先,我們需要了解什麼是計算能力。計算能力是計算機執行計算的能力,通常以 FLOPS 每秒浮點運算 或 TOPS 每秒張量運算 等指標來衡量。在人工智慧領域,算力是實現各種演算法和模型的關鍵...