0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

服務(wù)器:計算產(chǎn)業(yè)鏈及競爭格局

架構(gòu)師技術(shù)聯(lián)盟 ? 來源:架構(gòu)師技術(shù)聯(lián)盟 ? 2023-06-11 16:13 ? 次閱讀

人工智能之火點燃算力需求,AI服務(wù)器市場拆解”,詳細(xì)介紹了服務(wù)器構(gòu)成及市場情況、AIGC帶來服務(wù)器變革、訓(xùn)練&推理帶來服務(wù)器增量需求、AI服務(wù)器市場迎來高速發(fā)展機遇、AI服務(wù)器產(chǎn)業(yè)鏈解析、AI服務(wù)器競爭格局。

詳細(xì)技術(shù)內(nèi)容參考“高性能計算知識匯總”及“OpenMP編譯原理及實現(xiàn)”,高性能計算應(yīng)用特征剖析、深度報告:GPU研究框架、《高性能計算和超算專題》。及人工智能之火點燃算力需求,AI服務(wù)器市場拆解。

服務(wù)器主要硬件包括處理器、內(nèi)存、芯片組、I/O (RAID卡、網(wǎng)卡、HBA卡)、硬盤、機箱(電源、風(fēng)扇)。以一臺普通的服務(wù)器生產(chǎn)成本為例,CPU及芯片組大致占比50%左右,內(nèi)存大致占比15%左右,外部存儲大致占比10%左右,其他硬件占比25%左右。

服務(wù)器的邏輯架構(gòu)和普通計算機類似。但是由于需要提供高性能計算,因此在處理能力、穩(wěn)定性、可靠性、安全性、可擴展性、可管理性等方面要求較高。

邏輯架構(gòu)中,最重要的部分是CPU和內(nèi)存。CPU對數(shù)據(jù)進(jìn)行邏輯運算,內(nèi)存進(jìn)行數(shù)據(jù)存儲管理。

服務(wù)器的固件主要包括BIOS或UEFI、BMC、CMOS,OS包括32位和64位。

根據(jù)Counterpoint的全球服務(wù)器銷售跟蹤報告,服務(wù)器市場規(guī)模持續(xù)增長。2022年,全球服務(wù)器出貨量將同比增長6%,達(dá)到1380萬臺。收入將同比增長17%,達(dá)到1117億美元。根據(jù)IDC、中商產(chǎn)業(yè)研究院,我國服務(wù)器市場規(guī)模由2019年的182億美元增長至2022年的273.4億美元,復(fù)合年均增長率達(dá)14.5%,預(yù)計2023年我國服務(wù)器市場規(guī)模將增至308億美元。

9564d576-071d-11ee-962d-dac502259ad0.png

競爭格局:根據(jù)IDC發(fā)布的《2022年第四季度中國服務(wù)器市場跟蹤報告Prelim》,浪潮份額國內(nèi)領(lǐng)先,新華三次之,超聚變排行第三,中興通訊進(jìn)入前五。

目前,AIGC產(chǎn)業(yè)生態(tài)體系的雛形已現(xiàn),呈現(xiàn)為上中下三層架構(gòu):①第一層為上游基礎(chǔ)層,也就是由預(yù)訓(xùn)練模型為基礎(chǔ)搭建的AIGC技術(shù)基礎(chǔ)設(shè)施層。②第二層為中間層,即垂直化、場景化、個性化的模型和應(yīng)用工具。③第三層為應(yīng)用層,即面向C端用戶的文字、圖片、音視頻等內(nèi)容生成服務(wù)。

95827fcc-071d-11ee-962d-dac502259ad0.png

回顧GPT的發(fā)展,GPT家族與BERT模型都是知名的NLP模型,都基于Transformer技術(shù)。GPT,是一種生成式的預(yù)訓(xùn)練模型,由OpenAI團隊最早發(fā)布于2018年,GPT-1只有12個Transformer層,而到了GPT-3,則增加到96層。其中,GPT-1使用無監(jiān)督預(yù)訓(xùn)練與有監(jiān)督微調(diào)相結(jié)合的方式,GPT-2與GPT-3則都是純無監(jiān)督預(yù)訓(xùn)練的方式,GPT-3相比GPT-2的進(jìn)化主要是數(shù)據(jù)量、參數(shù)量的數(shù)量級提升。

未來異構(gòu)計算或成為主流

異構(gòu)計算(Heterogeneous Computing)是指使用不同類型指令集和體系架構(gòu)的計算單元組成系統(tǒng)的計算方式,目前主要包括GPU云服務(wù)器、FPGA云服務(wù)器和彈性加速計算實例EAIS等。讓最適合的專用硬件去服務(wù)最適合的業(yè)務(wù)場景。

在CPU+GPU的異構(gòu)計算架構(gòu)中,GPU與CPU通過PCle總線連接協(xié)同工作,CPU所在位置稱為主機端(host),而GPU所在位置稱為設(shè)備端(device)?;贑PU+GPU的異構(gòu)計算平臺可以優(yōu)勢互補,CPU負(fù)責(zé)處理邏輯復(fù)雜的串行程序,而GPU重點處理數(shù)據(jù)密集型的并行計算程序,從而發(fā)揮最大功效。

越來越多的AI計算都采用異構(gòu)計算來實現(xiàn)性能加速。

阿里第一代計算型GPU實例,2017年對外發(fā)布GN4,搭載Nvidia M40加速器.,在萬兆網(wǎng)絡(luò)下面向人工智能深度學(xué)習(xí)場景,相比同時代的CPU服務(wù)器性能有近7倍的提升。

CPU適用于一系列廣泛的工作負(fù)載,特別是那些對于延遲和單位內(nèi)核性能要求較高的工作負(fù)載。作為強大的執(zhí)行引擎,CPU將它數(shù)量相對較少的內(nèi)核集中用于處理單個任務(wù),并快速將其完成。這使它尤其適合用于處理從串行計算到數(shù)據(jù)庫運行等類型的工作。

GPU最初是作為專門用于加速特定3D渲染任務(wù)的ASIC開發(fā)而成的。隨著時間的推移,這些功能固定的引擎變得更加可編程化、更加靈活。盡管圖形處理和當(dāng)下視覺效果越來越真實的頂級游戲仍是GPU的主要功能,但同時,它也已經(jīng)演化為用途更普遍的并行處理器,能夠處理越來越多的應(yīng)用程序。

95925370-071d-11ee-962d-dac502259ad0.png

AI服務(wù)器作為算力基礎(chǔ)設(shè)備持續(xù)增長

AI服務(wù)器作為算力基礎(chǔ)設(shè)備,其需求有望受益于AI時代下對于算力不斷提升的需求而快速增長。根據(jù)TrendForce,截至2022年為止,預(yù)估搭載GPGPU(General Purpose GPU)的AI服務(wù)器年出貨量占整體服務(wù)器比重近1%,預(yù)估在ChatBot相關(guān)應(yīng)用加持下,有望再度推動AI相關(guān)領(lǐng)域的發(fā)展,預(yù)估出貨量年成長可達(dá)8%;2022~2026年復(fù)合成長率將達(dá)10.8%。

AI服務(wù)器是異構(gòu)服務(wù)器,可以根據(jù)應(yīng)用范圍采用不同的組合方式,如CPU + GPU、CPU + TPU、CPU +其他加速卡等。IDC預(yù)計,中國AI服務(wù)器2021年的市場規(guī)模為57億美元,同比增長61.6%,到2025年市場規(guī)模將增長到109億美元,CAGR為17.5%。

AI服務(wù)器構(gòu)成及形態(tài)

AI服務(wù)器主要構(gòu)成:以浪潮NF5688M6 服務(wù)器為例,其采用NVSwitch實現(xiàn)GPU跨節(jié)點P2P高速通信互聯(lián)。整機8 顆 NVIDIAAmpere架構(gòu)GPU,通過NVSwitch實現(xiàn)GPU跨節(jié)點P2P高速通信互聯(lián)。配置 2顆第三代Intel Xeon可擴展處理器(Ice Lake),支持8塊2.5英寸NVMe SSD orSATA/SASSSD以及板載2塊SATA M.2,可選配1張PCIe 4.0 x16 OCP 3.0網(wǎng)卡,速率支持10G/25G/100G;

可支持10個PCIe 4.0 x16插槽, 2個PCIe 4.0 x16插槽(PCIe 4.0 x8速率), 1個OCP3.0插槽;支持32條DDR4RDIMM/LRDIMM內(nèi)存,速率最高支持3200MT/s,物理結(jié)構(gòu)還包括6塊3000W 80Plus鉑金電源、N+1冗余熱插拔風(fēng)扇、機箱等。

目前按照GPU數(shù)量的不同,有4顆GPU(浪潮NF5448A6)、8顆GPU(Nvidia A100 640GB)以及16顆GPU(NVIDIA DGX-2)的AI服務(wù)器。

95a5b2bc-071d-11ee-962d-dac502259ad0.png

AI服務(wù)器核心組件包括GPU(圖形處理器)、DRAM(動態(tài)隨機存取存儲器)、SSD(固態(tài)硬盤)和RAID卡、CPU(中央處理器)、網(wǎng)卡、PCB、高速互聯(lián)芯片(板內(nèi))和散熱模組等。

CPU主要供貨廠商為Intel、GPU目前領(lǐng)先廠商為國際巨頭英偉達(dá),以及國內(nèi)廠商如寒武紀(jì)、海光信息等。

AI服務(wù)器競爭格局

IDC發(fā)布了《2022年第四季度中國服務(wù)器市場跟蹤報告Prelim》。從報告可以看到,前兩名浪潮與新華三的變化較小,第三名為超聚變,從3.2%份額一躍而至10.1%,增幅遠(yuǎn)超其他服務(wù)器廠商。Top8服務(wù)器廠商中,浪潮、戴爾、聯(lián)想均出現(xiàn)顯著下滑,超聚變和中興則取得明顯增長。其中,浪潮份額從30.8%下降至28.1%;新華三份額從17.5%下降至17.2%;中興通訊從3.1%提升至5.3%,位居國內(nèi)第5。

聯(lián)想降幅最為明顯,從7.5%下降至4.9%。

據(jù)TrendForce集邦咨詢統(tǒng)計,2022年AI服務(wù)器采購占比以北美四大云端業(yè)者Google、AWS、Meta、Microsoft合計占66.2%為最,而中國近年來隨著國產(chǎn)化力道加劇,AI建設(shè)浪潮隨之增溫,以ByteDance的采購力道最為顯著,年采購占比達(dá)6.2%,其次緊接在后的則是Tencent、Alibaba與Baidu,分別約為2.3%、1.5%與1.5%。

國內(nèi)AI服務(wù)器競爭廠商包括:浪潮信息、新華三、超聚變、中興通訊等。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • cpu
    cpu
    +關(guān)注

    關(guān)注

    68

    文章

    10804

    瀏覽量

    210843
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    12

    文章

    8958

    瀏覽量

    85085
  • 人工智能
    +關(guān)注

    關(guān)注

    1789

    文章

    46652

    瀏覽量

    237090

原文標(biāo)題:服務(wù)器:計算產(chǎn)業(yè)鏈及競爭格局

文章出處:【微信號:架構(gòu)師技術(shù)聯(lián)盟,微信公眾號:架構(gòu)師技術(shù)聯(lián)盟】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    什么是云服務(wù)器

    服務(wù)器(Cloud Server),又稱云主機或彈性計算服務(wù)(Elastic Compute Service, ECS),是基于云計算技術(shù)提供的一種虛擬化
    的頭像 發(fā)表于 09-27 09:34 ?145次閱讀

    智能邊緣服務(wù)器 --開啟計算新時代

    一、智能邊緣服務(wù)器概念 云尚通信技術(shù)(深圳)有限公司 智能邊緣服務(wù)器是一種新型的計算設(shè)備,它被部署在網(wǎng)絡(luò)邊緣,靠近數(shù)據(jù)源和終端用戶。與傳統(tǒng)服務(wù)器相比,其獨特之處在于能夠更快速地處理和響
    的頭像 發(fā)表于 08-13 11:01 ?241次閱讀
    智能邊緣<b class='flag-5'>服務(wù)器</b> --開啟<b class='flag-5'>計算</b>新時代

    AI云服務(wù)器:開啟智能計算新時代

    一、AI云服務(wù)器的定義與特點 AI云服務(wù)器的定義 AI云服務(wù)器是一種基于云計算技術(shù),專為處理人工智能相關(guān)工作負(fù)載而構(gòu)建的服務(wù)器。它集成了強大
    的頭像 發(fā)表于 08-09 16:08 ?662次閱讀

    鴻海強化北美AI服務(wù)器產(chǎn)能,深化產(chǎn)業(yè)鏈布局

    鴻海旗下負(fù)責(zé)服務(wù)器制造的工業(yè)富聯(lián)董事長鄭弘孟曾表示,鴻海集團已整合了AI產(chǎn)業(yè)鏈上下游,并在全球各大重要區(qū)域設(shè)有生產(chǎn)基地,這使其不僅能更好地滿足客戶需求,增強客戶粘性,同時也能在AI產(chǎn)業(yè)鏈中占據(jù)主導(dǎo)地位。
    的頭像 發(fā)表于 05-23 09:03 ?423次閱讀

    RISC-V在服務(wù)器方面應(yīng)用與發(fā)展前景

    RISC-V在服務(wù)器方面的應(yīng)用與發(fā)展前景十分廣闊。作為一種開源、開放、簡潔、靈活的指令集,RISC-V近年來在芯片產(chǎn)業(yè)中發(fā)展迅速,并逐漸引領(lǐng)新一輪處理芯片技術(shù)與產(chǎn)業(yè)的變革浪潮。 在
    發(fā)表于 04-28 09:04

    RISC-V在服務(wù)器方面的應(yīng)用與發(fā)展前景如何?剛畢業(yè)的學(xué)生才開始學(xué)來的及嗎?

    RISC-V在服務(wù)器方面的應(yīng)用與發(fā)展前景十分廣闊。作為一種開源、開放、簡潔、靈活的指令集,RISC-V近年來在芯片產(chǎn)業(yè)中發(fā)展迅速,并逐漸引領(lǐng)新一輪處理芯片技術(shù)與產(chǎn)業(yè)的變革浪潮。 在
    發(fā)表于 04-28 08:49

    服務(wù)器的特點

    服務(wù)器是一種基于云計算技術(shù)的服務(wù)器服務(wù),它提供了可靈活擴展的計算資源和環(huán)境。Rak部落小編為您整理發(fā)布云
    的頭像 發(fā)表于 04-09 09:30 ?374次閱讀

    2024年小米汽車產(chǎn)業(yè)鏈分析及新品上市全景洞察報告

    2024年小米汽車產(chǎn)業(yè)鏈分析及新品上市全景洞察報告 *附件:小米汽車全面洞察報告.pdf 本文主要介紹了小米汽車在市場中的布局和優(yōu)勢,以及其面臨的劣勢與挑戰(zhàn)。小米汽車憑借品牌、技術(shù)和成本三大核心優(yōu)勢
    發(fā)表于 03-29 13:46

    linux服務(wù)器和windows服務(wù)器

    ,Linux服務(wù)器表現(xiàn)出更好的性能和穩(wěn)定性,因此廣泛應(yīng)用于科學(xué)計算、大數(shù)據(jù)處理和網(wǎng)絡(luò)服務(wù)器等領(lǐng)域。 另一方面,Windows服務(wù)器是由微軟開發(fā)和維護(hù)的
    發(fā)表于 02-22 15:46

    gpu服務(wù)器是干什么的 gpu服務(wù)器與cpu服務(wù)器的區(qū)別有哪些

    gpu服務(wù)器是干什么的 gpu服務(wù)器與cpu服務(wù)器的區(qū)別 GPU服務(wù)器是一種專門用于處理圖形運算的服務(wù)器,而CPU
    的頭像 發(fā)表于 01-30 15:31 ?786次閱讀

    陶瓷基板產(chǎn)業(yè)鏈分布及工藝制作流程

    陶瓷基板產(chǎn)業(yè)鏈上游主要為陶瓷粉體制備企業(yè),中游為陶瓷裸片及陶瓷基板生產(chǎn)企業(yè),下游則涵蓋汽車、衛(wèi)星、光伏、軍事等多個應(yīng)用領(lǐng)域??v觀陶瓷基板產(chǎn)業(yè)鏈,鮮有企業(yè)能夠打通垂直產(chǎn)業(yè)鏈,形成粉體、裸片、基板的一體化優(yōu)勢。
    的頭像 發(fā)表于 12-26 11:43 ?2082次閱讀
    陶瓷基板<b class='flag-5'>產(chǎn)業(yè)鏈</b>分布及工藝制作流程

     物理服務(wù)器和大寬服務(wù)器怎么選

    物理服務(wù)器和大寬服務(wù)器的選擇需要根據(jù)具體的業(yè)務(wù)需求來決定。物理服務(wù)器是一種獨立的、非虛擬化的計算機設(shè)備,它通常被用作高性能應(yīng)用、數(shù)據(jù)庫、存儲和網(wǎng)絡(luò)等關(guān)鍵業(yè)務(wù)應(yīng)用的運行平臺。常見的物理
    的頭像 發(fā)表于 12-20 10:50 ?529次閱讀

    液冷服務(wù)器行業(yè)分類及產(chǎn)業(yè)鏈分析

    中國液冷服務(wù)器行業(yè)市場規(guī)模將持續(xù)高速增長,其原因在于:1. 國家綠色能源和可持續(xù)發(fā)展扶持政策,推動液冷服務(wù)器廣泛應(yīng)用。2. 數(shù)字化轉(zhuǎn)型促進(jìn)液冷技術(shù)進(jìn)步,加大投入實現(xiàn)全產(chǎn)業(yè)鏈可視化。
    的頭像 發(fā)表于 12-18 14:13 ?2739次閱讀
    液冷<b class='flag-5'>服務(wù)器</b>行業(yè)分類及<b class='flag-5'>產(chǎn)業(yè)鏈</b>分析

    智慧燈桿產(chǎn)業(yè)鏈企業(yè)圖譜

    智慧燈桿產(chǎn)業(yè)鏈企業(yè)圖譜智慧燈桿產(chǎn)業(yè)鏈企業(yè)圖譜智慧燈桿產(chǎn)業(yè)鏈企業(yè)圖譜智慧燈桿產(chǎn)業(yè)鏈企業(yè)圖譜智慧燈桿產(chǎn)業(yè)鏈企業(yè)圖譜智慧燈桿
    發(fā)表于 12-11 17:36 ?1次下載

    gpu服務(wù)器是干什么的 gpu服務(wù)器與cpu服務(wù)器的區(qū)別

     相比于傳統(tǒng)的CPU服務(wù)器,GPU服務(wù)器支持同時計算大量相似的計算操作,可以實現(xiàn)更強的并行計算性能。GPU
    的頭像 發(fā)表于 12-02 17:20 ?1841次閱讀