0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

PCIe 6.0元年,AI與HPC迎來新速度

E4Life ? 來源:電子發(fā)燒友網(wǎng) ? 作者:周凱揚 ? 2024-01-31 09:02 ? 次閱讀

電子發(fā)燒友網(wǎng)報道(文/周凱揚)2022年1月,PCI-SIG發(fā)布了PCIe 6.0規(guī)范,正式拉開了接口帶寬大幅升級的序幕。然而,在規(guī)范公布的兩年時間里,也已經(jīng)更新了6.0.1和6.1版本,PCIe 6.0似乎在設(shè)計層面上已經(jīng)完善了。但我們這期間并沒有看到PCIe 6.0產(chǎn)品的實際落地,甚至PCIe 5.0產(chǎn)品只是在消費級產(chǎn)品小批量落地而已。而在今年三月,根據(jù)PCI-SGI的預(yù)測,PCIe 6.0的硬件終于快要面世。

AI/ML、HPC和云端圖形負載渴求的翻倍帶寬

作為從服務(wù)器與PC起家的接口,PCIe近幾年已經(jīng)開始輻射到以數(shù)據(jù)為核心的應(yīng)用中去,比如IoT、汽車和醫(yī)療電子等。從PCIe 3.0開始,每一代接口標準規(guī)范都會為速率帶來翻倍的提升,PCIe 6.0更是將速率提升至64GT/s,x16單向帶寬拔高至256GB/s。

這樣的速率或許在IoT應(yīng)用中顯得有些多余,但在時下大熱的AI/ML應(yīng)用中,可以說是大幅提高計算效率的殺手锏。要知道目前爆火的生成式AI應(yīng)用ChatGPT等,可謂受盡了大量同時訪問與需求的困擾,即便H100的帶寬再高,在PCIe 5.0下依然計算效率受限,得靠NVLink才能突破限制。

目前的數(shù)據(jù)中心,尤其是其中的AI服務(wù)器,已經(jīng)成了帶寬無底洞。何況對于處理AI/ML訓(xùn)練模型來說,以快制勝可以說是一條市場鐵則。更快的帶寬意味著生成式AI的并發(fā)響應(yīng)更快,給到更短的文本、圖形生成時間,從而進一步提升用戶體驗。而對于大部分托管/租用服務(wù)器的應(yīng)用開發(fā)者來說,這也意味著運營成本大幅降低。

HPC也不例外,在長時間運轉(zhuǎn)的HPC服務(wù)器中,帶寬就意味著計算效率,尤其是量子力學(xué)、分子動力學(xué)所用到的軟件,所需內(nèi)存帶寬更高。如果沒有足夠的帶寬,就只能分節(jié)點來減小不同進程之間的帶寬競爭。最后一大痛點是云游戲帶來的,對于這種需要多并發(fā)高圖形負載的運用而言,帶寬就決定了云游戲的并發(fā)數(shù)以及圖形質(zhì)量。

AI/ML會加速PCIe 6.0的落地嗎

從PCIe的發(fā)展歷史來看,平均3到4年就會正式推出新的規(guī)范,只有從3.0到4.0經(jīng)歷了7年的漫長的時間,這也是因為彼時的PCIe 3.0已經(jīng)算是超前的標準,直到2015年后,全球數(shù)據(jù)流量進入爆發(fā)期。此后從4.0演進至5.0花了2年時間,從5.0演進至6.0花了三年時間。據(jù)推測,PCIe 7.0規(guī)范將在2025年正式推出。

然而我們也發(fā)現(xiàn),基于新標準的PCIe產(chǎn)品在落地速度上并沒有那么快。往往最先落地的是AI加速器、SSD等設(shè)備,畢竟本地處理速度再快也要網(wǎng)絡(luò)速度跟上才行。就拿還未實現(xiàn)的800G以太網(wǎng)為例,其所需要的單向帶寬也就是100GB/s,正好在PCIe 6.0的帶寬覆蓋范圍內(nèi)。

所以即便有著AI/ML的推進,今年應(yīng)該只會有少數(shù)PCIe 6.0產(chǎn)品能夠落地,且落地場景還是集中在數(shù)據(jù)中心領(lǐng)域,且先一步用于AI服務(wù)器上,這點從PCIe 6.0控制器IP、服務(wù)器CPU IP廠商的動向上也可以看出。

寫在最后

PCIe 6.0作為目前最先進的接口標準之一,注定會為下一輪計算、存儲技術(shù)的創(chuàng)新帶來設(shè)計便利。但我們也應(yīng)該實時關(guān)注市場需求,過去的PCIe能夠維持主流接口的地位,正是靠的聯(lián)合硬件廠商穩(wěn)步推進市場需求,這個策略在AI時代依舊通用。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 接口
    +關(guān)注

    關(guān)注

    33

    文章

    8257

    瀏覽量

    149953
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    28877

    瀏覽量

    266221
  • PCIe
    +關(guān)注

    關(guān)注

    15

    文章

    1165

    瀏覽量

    81978
收藏 人收藏

    評論

    相關(guān)推薦

    Cadence展示完整的PCIe 7.0 IP解決方案

    十多年來,Cadence 對 PCIe 技術(shù)的堅定承諾和支持,在業(yè)界有目共睹。我們深知強大 PCIe 生態(tài)系統(tǒng)的重要性,并感謝 PCI-SIG 提供的平臺。在 PCI-SIG 開發(fā)者大會迎來 32 周年之際,Cadence 宣布
    的頭像 發(fā)表于 08-29 09:14 ?236次閱讀
    Cadence展示完整的<b class='flag-5'>PCIe</b> 7.0 IP解決方案

    新思科技PCIe 7.0驗證IP(VIP)的特性

    在近期的博文《新思科技率先推出PCIe 7.0 IP解決方案,加速HPCAI等萬億參數(shù)領(lǐng)域的芯片設(shè)計》中,新思科技宣布推出綜合全面的PCIe Express Gen 7(
    的頭像 發(fā)表于 07-24 10:11 ?339次閱讀
    新思科技<b class='flag-5'>PCIe</b> 7.0驗證IP(VIP)的特性

    如何簡化PCIe 6.0交換機的設(shè)計

    由于全球數(shù)據(jù)流量呈指數(shù)級增長,PCIe 6.0 交換機的市場需求也出現(xiàn)了激增。PCIe 6.0 交換機在高性能計算(HPC)系統(tǒng)(尤其是數(shù)據(jù)
    的頭像 發(fā)表于 07-05 09:45 ?308次閱讀
    如何簡化<b class='flag-5'>PCIe</b> <b class='flag-5'>6.0</b>交換機的設(shè)計

    華為汪濤:5G-A商用元年AI入端元年碰撞,將開啟“移動AI時代”

    [中國,上海,20246月26日] 2024 MWC上海期間,華為常務(wù)董事、ICT基礎(chǔ)設(shè)施業(yè)務(wù)管理委員會主任汪濤在大會上發(fā)表了“加速5G-A發(fā)展,開啟移動AI時代”的主題演講。他表示,2024
    的頭像 發(fā)表于 06-27 17:28 ?1100次閱讀

    下一代PCIe5.0 /6.0技術(shù)熱潮趨勢與測試挑戰(zhàn)

    大模型時代已經(jīng)到來,AI大模型技術(shù)快速成熟,進入萬億參數(shù)時代,對于AI算力性能要求越來越高,表現(xiàn)為計算系統(tǒng)的節(jié)點內(nèi)卡間互聯(lián)與節(jié)點間的網(wǎng)絡(luò)互聯(lián),高速互聯(lián)的底層是PCIe,對于PCIe的技
    的頭像 發(fā)表于 03-06 10:35 ?798次閱讀
    下一代<b class='flag-5'>PCIe</b>5.0 /<b class='flag-5'>6.0</b>技術(shù)熱潮趨勢與測試挑戰(zhàn)

    重讀AI大模型元年:“百模趕考,文心奪魁”

    AI大模型爆發(fā)元年,留給我們的行業(yè)思考與未來洞察
    的頭像 發(fā)表于 02-12 19:01 ?2572次閱讀
    重讀<b class='flag-5'>AI</b>大模型<b class='flag-5'>元年</b>:“百模趕考,文心奪魁”

    2024,人形機器人迎來產(chǎn)業(yè)化元年

    2023,人形機器人Digit進入亞馬遜工廠驗證,2024,特斯拉人形機器人,優(yōu)必選、智機器人有望分別進入特斯拉工廠和BYD工廠進行商業(yè)化驗證,人形機器人迎來產(chǎn)業(yè)化
    發(fā)表于 01-23 11:30 ?478次閱讀

    AI手機比例有較大提升 2024將成為AI手機的元年

    2024AI手機的比例將有較大提升,將成為AI手機的元年
    的頭像 發(fā)表于 01-22 11:19 ?942次閱讀
    <b class='flag-5'>AI</b>手機比例有較大提升 2024<b class='flag-5'>年</b>將成為<b class='flag-5'>AI</b>手機的<b class='flag-5'>元年</b>

    新火種AI|“賭城”上演“科技春晚”,AI硬件將在2024大爆發(fā)

    如果說2023是生成式AI元年,那么2024將會是AI硬件的元年。
    的頭像 發(fā)表于 01-12 18:26 ?777次閱讀
    新火種<b class='flag-5'>AI</b>|“賭城”上演“科技春晚”,<b class='flag-5'>AI</b>硬件將在2024<b class='flag-5'>年</b>大爆發(fā)

    PCIe標準的演進歷史 各代PCIe標準之間的主要差異

    自2003推出以來,PCIe發(fā)展至今已經(jīng)從最初的1.0升級到了6.0,本文則為大家簡單介紹一下PCIe標準的演進歷史以及各代PCIe標準之
    的頭像 發(fā)表于 12-14 16:38 ?4483次閱讀
    <b class='flag-5'>PCIe</b>標準的演進歷史 各代<b class='flag-5'>PCIe</b>標準之間的主要差異

    研揚最新COM-HPC模塊讓您獲得源源不斷的強勁性能

    PCIe設(shè)備,全面的高速I/O和基于SSD的可擴展存儲,使其成為IC測試設(shè)備,邊緣AI服務(wù)器和高級路側(cè)設(shè)備等高性能應(yīng)用的精英解決方案。應(yīng)用與特點/Application
    的頭像 發(fā)表于 11-18 08:05 ?415次閱讀
    研揚最新COM-<b class='flag-5'>HPC</b>模塊讓您獲得源源不斷的強勁性能

    HPCAI:完美融合

    HPC早于AI問世,因此這兩個領(lǐng)域在軟件和基礎(chǔ)設(shè)施方面存在顯著差異。要將它們有機地融合在一起,需要對工作負載管理和工具進行必要的調(diào)整。以下是HPC如何逐步發(fā)展以迎合AI挑戰(zhàn)的一些方法。
    的頭像 發(fā)表于 10-22 14:59 ?1401次閱讀

    新思科技成功實現(xiàn)與英特爾PCIe 6.0測試芯片的互操作性

    新思科技PCIe 6.0 IP與英特爾 PCIe 6.0測試芯片實現(xiàn)互操作 在64GT/s 高速連接下成功驗證互操作性,降低高性能計算SoC的集成風險 新思科技近日宣布,新思科技PCI
    的頭像 發(fā)表于 10-16 09:22 ?698次閱讀

    PICMG發(fā)布COM-HPC 1.2規(guī)范

    PICMG宣布發(fā)布COM-HPC 1.2規(guī)范,增加了COM-HPC Mini外形,其大小約為信用卡(90x75毫米)或第二小COM-HPC外形尺寸的一半,但仍提供對PCIe Gen5,
    的頭像 發(fā)表于 10-12 15:13 ?886次閱讀
    PICMG發(fā)布COM-<b class='flag-5'>HPC</b> 1.2規(guī)范

    新思科技PCIe 6.0 IP與英特爾PCIe 6.0測試芯片實現(xiàn)互操作

    :SNPS)近日宣布,新思科技PCI Express(PCIe6.0 IP在端到端64GT/s的連接下,成功實現(xiàn)與英特爾PCIe 6.0測試芯片的互操作性。這一全新里程碑也將保證,在
    發(fā)表于 10-12 15:11 ?271次閱讀