0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

異構(gòu)+Chiplet—通往數(shù)據(jù)中心的能效之路

奇異摩爾 ? 來(lái)源:奇異摩爾 ? 2023-06-21 15:50 ? 次閱讀

隨著以大模型為代表的AIGC迅速崛起,數(shù)據(jù)到算力需求的持續(xù)暴漲,為數(shù)據(jù)中心帶來(lái)了巨大的考驗(yàn)。為填補(bǔ)算力鴻溝,下一代數(shù)據(jù)中心必須要具備更高的算力密度、更大的網(wǎng)絡(luò)規(guī)模,并能夠靈活地部署和更新海量新應(yīng)用。

在這一輪新的技術(shù)方向中,異構(gòu)計(jì)算架構(gòu)和Chiplet技術(shù)因能有效提升復(fù)雜場(chǎng)景計(jì)算效率,算力密度和網(wǎng)絡(luò)規(guī)模,被普遍視為通往數(shù)據(jù)中心未來(lái)的能效之路。

AIGC或?qū)⑺洪_(kāi)數(shù)據(jù)中心算力缺口

在AI大模型飛速發(fā)展之下,單個(gè)大語(yǔ)言訓(xùn)練驅(qū)動(dòng)AI訓(xùn)練服務(wù)器需求約2億美元,AI推理服務(wù)器方面,如ChatGPT在初期便可帶動(dòng)推理服務(wù)器需求約45億美元。

據(jù)中國(guó)信通院,2021年國(guó)內(nèi)IDC市場(chǎng)規(guī)模1500.2億元,同比增長(zhǎng)28.5%。據(jù)信通院預(yù)計(jì),隨著我國(guó)各地區(qū)、各行業(yè)數(shù)字化轉(zhuǎn)型深入推進(jìn)、AI訓(xùn)練需求持續(xù)增長(zhǎng)、智能終端實(shí)時(shí)計(jì)算需求增長(zhǎng),2022年國(guó)內(nèi)市場(chǎng)規(guī)模將達(dá)1900.7億元,同增26.7%。

算力作為大模型的核心引擎,計(jì)算方式簡(jiǎn)單粗暴,即實(shí)際擁有多少的GPU芯片,將直接決定其算力的大小。以ChatGPT為例,其模型計(jì)算主要基于微軟的Azure云服務(wù)進(jìn)行,本質(zhì)上是借助微軟自有的IDC資源,在云端完成計(jì)算過(guò)程后,再將結(jié)果返回給OpenAI。

AIGC所需的算力不是固定的,而是逐次遞增的。數(shù)據(jù)中心是承接AI計(jì)算需求的直接形式,其算力需求為AIGC的能力所驅(qū)動(dòng),也就是AIGC越聰明,其背后所需要的算力就越多,而供需雙方存在的現(xiàn)實(shí)差距,則讓數(shù)據(jù)中心的算力缺口變得愈加嚴(yán)重。

互聯(lián)網(wǎng)廠商布局ChatGPT同類產(chǎn)品,或?qū)⒓哟蠛诵某鞘蠭DC算力供給缺口。艾瑞咨詢數(shù)據(jù)顯示,2021年國(guó)內(nèi)IDC行業(yè)下游客戶占比中,互聯(lián)網(wǎng)廠商居首位,占比為60%,國(guó)內(nèi)核心城市IDC算力供給缺口或?qū)⒓哟蟆?/p>

AIGC時(shí)代,智能算力崛起

隨著人工智能進(jìn)入新的發(fā)展周期,以及大模型的興起,傳統(tǒng)的芯片需求結(jié)構(gòu)發(fā)生了變化。盡管總體算力仍在增長(zhǎng),但通用計(jì)算力由CPU主導(dǎo)的比例正在下降,而智能計(jì)算力由GPU主導(dǎo)的比例逐漸增加。

目前,GPU在AI芯片市場(chǎng)的占比約為90%。根據(jù)VMR的數(shù)據(jù),2021年全球GPU行業(yè)市場(chǎng)規(guī)模為334.7億美元,隨著大型模型訓(xùn)練的成熟,預(yù)計(jì)到2030年將達(dá)到4773.7億美元,年均增長(zhǎng)率為34.35%。

新華三集團(tuán)副總裁、計(jì)算存儲(chǔ)產(chǎn)品線總裁徐潤(rùn)安在接受媒體采訪時(shí)表示,智能算力占比變大原因在于,x86架構(gòu)CPU單核性能強(qiáng)、通用性好。但AI場(chǎng)景需要多核、高并發(fā)、高帶寬芯片。綜合考慮成本、效率,GPU、DPU、NPU通常表現(xiàn)更好。CPU部分職能被其他專用芯片分擔(dān)。在他看來(lái),大模型會(huì)帶來(lái)巨大的智能算力消耗。

Chiplet:破局數(shù)據(jù)中心未來(lái)

近20年中,單一的制程微縮已被證明無(wú)法趕上對(duì)性能需求的步伐。尤其是在數(shù)據(jù)中心,情況遠(yuǎn)比客戶端產(chǎn)品更為復(fù)雜,一個(gè)非常典型的情況是多個(gè)客戶端在同一產(chǎn)品上運(yùn)行工作負(fù)載,如多核CPU或GPU。于是,人們開(kāi)始將未來(lái)依托在將計(jì)算單元、內(nèi)存等和其他模塊成在同一封裝上的Chiplet異構(gòu)集成路線之上。

Chiplet架構(gòu)對(duì)于服務(wù)器處理器而言意義非凡,大大降低了處理器的開(kāi)發(fā)門檻和成本,起到了巨大的推動(dòng)作用。正如AMD開(kāi)創(chuàng)性的chiplet產(chǎn)品所證明的那樣,轉(zhuǎn)向chiplet技術(shù)可以顯著改善數(shù)據(jù)中心的計(jì)算成本,并提高互連效率。迄今,全球主流服務(wù)器芯片廠商都開(kāi)始將chiplet納入自身產(chǎn)品的主要路徑之一。

就此,英特爾 IO 技術(shù)解決方案團(tuán)隊(duì)?wèi)?zhàn)略家Kurt Lender 總結(jié)了 chiplet 技術(shù)的影響“有合理的預(yù)期,未來(lái) 10 年的 HPC 采購(gòu)將利用 chiplet 技術(shù)更好地支持他們的科學(xué)工作負(fù)載。” AMD 的 CEO Lisa Su也表現(xiàn)出了同樣的期待,當(dāng)被問(wèn)及她是否認(rèn)為未來(lái) 10 年的 HPC 采購(gòu)指定定制chiplet設(shè)計(jì)的計(jì)算芯片而不是現(xiàn)成的商品時(shí),她回答“是”。

Kurt Lender 表示,創(chuàng)建基于 UCIe 的chiplet 設(shè)計(jì)在成本方面具有顯著的優(yōu)勢(shì),“有各種縱向擴(kuò)展和橫向擴(kuò)展的成本優(yōu)勢(shì),包括由于與單片硅設(shè)計(jì)相比占地面積更小而導(dǎo)致chiplet的高良率而節(jié)省的成本,以及能夠指定可以利用 HPC 冷卻功能的高密度、高功率封裝。在其最完整的表達(dá)中,基于chiplet 的架構(gòu)使設(shè)計(jì)人員能夠?qū)?lái)自多個(gè)供應(yīng)商的 IP 和不同職稱工藝技術(shù)的芯??焖偌傻揭粋€(gè)封裝中。”

關(guān)于隨著以大模型為代表的人工智能大規(guī)模計(jì)算的迅速崛起,數(shù)據(jù)中心的算力難題不斷加劇。而異構(gòu)和Chiplet會(huì)將數(shù)據(jù)中心的未來(lái)引向何處,還讓我們拭目以待。???????




審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • GPU芯片
    +關(guān)注

    關(guān)注

    1

    文章

    303

    瀏覽量

    5747
  • OpenAI
    +關(guān)注

    關(guān)注

    9

    文章

    988

    瀏覽量

    6252
  • chiplet
    +關(guān)注

    關(guān)注

    6

    文章

    404

    瀏覽量

    12513
  • 奇異摩爾
    +關(guān)注

    關(guān)注

    0

    文章

    39

    瀏覽量

    3283
  • ChatGPT
    +關(guān)注

    關(guān)注

    28

    文章

    1517

    瀏覽量

    6921
  • 先進(jìn)封裝
    +關(guān)注

    關(guān)注

    1

    文章

    337

    瀏覽量

    177
  • 芯粒
    +關(guān)注

    關(guān)注

    0

    文章

    54

    瀏覽量

    99

原文標(biāo)題:異構(gòu)+Chiplet,通往數(shù)據(jù)中心的能效之路

文章出處:【微信號(hào):奇異摩爾,微信公眾號(hào):奇異摩爾】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    數(shù)據(jù)中心管理系統(tǒng)對(duì)配電系統(tǒng)、能耗、溫度、蓄電池等運(yùn)行狀態(tài)實(shí)時(shí)監(jiān)測(cè)

    數(shù)據(jù)中心綜合管理系統(tǒng)采集數(shù)據(jù)中心中低壓配電系統(tǒng)、環(huán)境等數(shù)據(jù),通過(guò)實(shí)時(shí)監(jiān)測(cè)、控制和預(yù)警可以幫助數(shù)據(jù)中心
    的頭像 發(fā)表于 08-22 10:09 ?141次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>管理系統(tǒng)對(duì)配電系統(tǒng)、能耗、溫度、蓄電池等運(yùn)行狀態(tài)實(shí)時(shí)監(jiān)測(cè)

    安森美引領(lǐng)數(shù)據(jù)中心革命

    在當(dāng)今數(shù)字化轉(zhuǎn)型的浪潮中,數(shù)據(jù)中心作為支撐人工智能、云計(jì)算等關(guān)鍵技術(shù)的基礎(chǔ)設(shè)施,其能耗問(wèn)題日益凸顯。特別是隨著AI計(jì)算的蓬勃發(fā)展,數(shù)據(jù)中心對(duì)電力的需求急劇增加,傳統(tǒng)搜索引擎請(qǐng)求相比,AI引擎的電力消耗更是高達(dá)十倍以上。因此,提升數(shù)據(jù)中心
    的頭像 發(fā)表于 08-12 11:13 ?351次閱讀

    安森美推出提高數(shù)據(jù)中心的完整電源解決方案

    650V MOSFET的強(qiáng)大組合為數(shù)據(jù)中心應(yīng)用提供了一種完整解決方案,該方案在更小的封裝尺寸下提供了無(wú)與倫比的和卓越的熱性能。
    的頭像 發(fā)表于 06-13 11:01 ?427次閱讀

    安森美新一代技術(shù)助力數(shù)據(jù)中心提升

    在人工智能飛速發(fā)展的當(dāng)下,數(shù)據(jù)中心為了滿足日益增長(zhǎng)的計(jì)算需求,正面臨巨大的電力挑戰(zhàn)。的提高成為行業(yè)關(guān)注的焦點(diǎn),而安森美作為半導(dǎo)體技術(shù)的領(lǐng)先者,正通過(guò)其最新技術(shù)為數(shù)據(jù)中心提供解決方案
    的頭像 發(fā)表于 06-11 09:56 ?313次閱讀

    安科瑞數(shù)據(jù)中心綜合管理解決方案—中國(guó)移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    源消耗的2%左右。為了應(yīng)對(duì)這一問(wèn)題,數(shù)據(jù)中心需要采取綜合管理措施,以降低能源消耗、提高資源利用率、降低運(yùn)營(yíng)成本。安科瑞數(shù)據(jù)中心綜合
    的頭像 發(fā)表于 05-08 11:05 ?302次閱讀
    安科瑞<b class='flag-5'>數(shù)據(jù)中心</b>綜合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解決方案—中國(guó)移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    數(shù)據(jù)中心UPS系統(tǒng)運(yùn)行能耗優(yōu)化探討與應(yīng)用

    摘要:數(shù)據(jù)中心UPS系統(tǒng)合理的運(yùn)行方式對(duì)數(shù)據(jù)中心的管理和運(yùn)行具有十分重要的意義,PUE、pPUE、CLF/PLF、RER是通用的衡量數(shù)據(jù)中心
    的頭像 發(fā)表于 04-11 15:36 ?350次閱讀
    <b class='flag-5'>數(shù)據(jù)中心</b>UPS系統(tǒng)運(yùn)行能耗優(yōu)化探討與應(yīng)用

    淺析我國(guó)數(shù)據(jù)中心配電系統(tǒng)的能耗及水平

    淺析我國(guó)數(shù)據(jù)中心配電系統(tǒng)能耗及水平 張穎姣 安科瑞電氣股份有限公司?上海嘉定201801 摘要:伴隨著互聯(lián)網(wǎng)技術(shù)的深入全面發(fā)展,在“互聯(lián)網(wǎng)+”的時(shí)代,信息化進(jìn)程日益加快,我國(guó)數(shù)據(jù)中心
    的頭像 發(fā)表于 04-09 16:09 ?256次閱讀
    淺析我國(guó)<b class='flag-5'>數(shù)據(jù)中心</b>配電系統(tǒng)的能耗及<b class='flag-5'>能</b><b class='flag-5'>效</b>水平

    #mpo極性 #數(shù)據(jù)中心mpo

    數(shù)據(jù)中心MPO
    jf_51241005
    發(fā)布于 :2024年04月07日 10:05:13

    淺析我國(guó)數(shù)據(jù)中心配電系統(tǒng)能耗及水平

    淺析我國(guó)數(shù)據(jù)中心配電系統(tǒng)能耗及水平 張穎姣 安科瑞電氣股份有限公司?上海嘉定201801 摘要:伴隨著互聯(lián)網(wǎng)技術(shù)的深入全面發(fā)展,在“互聯(lián)網(wǎng)+”的時(shí)代,信息化進(jìn)程日益加快,我國(guó)數(shù)據(jù)中心
    的頭像 發(fā)表于 03-11 15:48 ?238次閱讀
    淺析我國(guó)<b class='flag-5'>數(shù)據(jù)中心</b>配電系統(tǒng)能耗及<b class='flag-5'>能</b><b class='flag-5'>效</b>水平

    安科瑞AcrelEMS-IDC數(shù)據(jù)中心綜合管理解決方案—中國(guó)移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    源消耗的2%左右。為了應(yīng)對(duì)這一問(wèn)題,數(shù)據(jù)中心需要采取綜合管理措施,以降低能源消耗、提高資源利用率、降低運(yùn)營(yíng)成本。安科瑞數(shù)據(jù)中心綜合
    的頭像 發(fā)表于 02-24 08:06 ?386次閱讀
    安科瑞AcrelEMS-IDC<b class='flag-5'>數(shù)據(jù)中心</b>綜合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理解決方案—中國(guó)移動(dòng)內(nèi)蒙古某項(xiàng)目案例分享

    #永久鏈路 #信道測(cè)試 #數(shù)據(jù)中心

    數(shù)據(jù)中心
    jf_51241005
    發(fā)布于 :2024年02月23日 10:17:58

    #光纜水峰 #綜合布線光纜 #數(shù)據(jù)中心

    數(shù)據(jù)中心光纜
    jf_51241005
    發(fā)布于 :2024年01月15日 09:43:26

    #預(yù)端接光纜 #24芯光纜 #數(shù)據(jù)中心

    數(shù)據(jù)中心光纜
    jf_51241005
    發(fā)布于 :2023年12月08日 11:01:21

    安科瑞數(shù)據(jù)中心管理系統(tǒng):提升,降低運(yùn)營(yíng)成本

    數(shù)據(jù)中心管理系統(tǒng)是一套功能強(qiáng)大、應(yīng)用廣泛、優(yōu)勢(shì)明顯的管理解決方案。通過(guò)該系統(tǒng),數(shù)據(jù)中心
    的頭像 發(fā)表于 11-07 15:57 ?453次閱讀
    安科瑞<b class='flag-5'>數(shù)據(jù)中心</b><b class='flag-5'>能</b><b class='flag-5'>效</b>管理系統(tǒng):提升<b class='flag-5'>能</b><b class='flag-5'>效</b>,降低運(yùn)營(yíng)成本

    綜合管理系統(tǒng)為數(shù)據(jù)中心配電管理能耗

    摘要:2022年11月1日,國(guó)家標(biāo)準(zhǔn)《數(shù)據(jù)中心限定值及等級(jí)》在全國(guó)范圍內(nèi)強(qiáng)制實(shí)施。國(guó)家對(duì)數(shù)據(jù)中心
    的頭像 發(fā)表于 10-19 10:39 ?445次閱讀
    綜合<b class='flag-5'>能</b><b class='flag-5'>效</b>管理系統(tǒng)為<b class='flag-5'>數(shù)據(jù)中心</b>配電管理能耗