0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

大模型非GPU專屬 AMD EPYC秀出CPU AI實(shí)力

微云疏影 ? 來(lái)源:綜合整理 ? 作者:綜合整理 ? 2023-12-07 15:51 ? 次閱讀

12月6日,amd在加利福尼亞州圣何塞舉行的“advancing ai”活動(dòng)中發(fā)布了一系列創(chuàng)新產(chǎn)品,包括mi300、Ryzen ai pc處理器。作為amd未來(lái)發(fā)展的關(guān)鍵,amd試圖在所有產(chǎn)品線上實(shí)現(xiàn)ai功能,從大規(guī)模數(shù)據(jù)中心訓(xùn)練和推理解決方案到面向消費(fèi)者的電腦和游戲體驗(yàn)。

amd在高性能計(jì)算(hpc)和數(shù)據(jù)中心領(lǐng)域顯示出持續(xù)的領(lǐng)導(dǎo)能力。amd epyc處理器和amd instinct加速器仍然是世界上許多最創(chuàng)新、最節(jié)能、最快的超級(jí)計(jì)算機(jī)的基本解決方案。

根據(jù)世界超級(jí)計(jì)算機(jī)排名第62屆top500,全體500個(gè)超級(jí)電腦套裝的amd平臺(tái)為140個(gè),比前年增加了39%。此外,amd根據(jù)green500的最新名單,為世界上能源效率最高的10臺(tái)超級(jí)計(jì)算機(jī)中的8臺(tái)提供了電力。

目前,橡樹(shù)國(guó)家實(shí)驗(yàn)室使用amd epyc處理器和安裝加速器驅(qū)動(dòng)最先進(jìn)的超級(jí)計(jì)算機(jī),勞倫斯利弗莫爾國(guó)家實(shí)驗(yàn)室也開(kāi)始安裝超大型超級(jí)計(jì)算機(jī)el capitan。

今天amd發(fā)布了第一個(gè)ai/hpc數(shù)據(jù)中心apu——mi300a,并將zen3 cpu和cdna3 gpu整合到一個(gè)芯片中,使用了hbm3內(nèi)存和第四代infinity fabric高速總線的相互連接。這樣可以簡(jiǎn)化結(jié)構(gòu),簡(jiǎn)化程序設(shè)計(jì)。

據(jù)amd介紹,apu具有充分利用集成架構(gòu)優(yōu)勢(shì)的性能潛力。統(tǒng)一內(nèi)存,統(tǒng)一內(nèi)存,共享的infinity母線技術(shù),動(dòng)態(tài)功耗分布及程序設(shè)計(jì)上的便利性等。

由于這些優(yōu)點(diǎn),mi300a在openfoam上的工作效率是h100的4倍。peakhpc每瓦的性能比gh200高出2倍。

在hpc等性能上也與h100相似或領(lǐng)先。隨著mi300a的增加,El Capitan將成為世界上第一臺(tái)具備2 exaplop(100億次)分配密度的超級(jí)電腦,同時(shí)也將成為世界上最快的超級(jí)計(jì)算機(jī)。

此外,EPYC本身也能夠具備強(qiáng)大的AI能力。在今年6月份舉辦的“數(shù)據(jù)中心與AI技術(shù)首映”上,AMD針對(duì)云原生負(fù)載進(jìn)行了優(yōu)化,帶來(lái)了以吞吐量為導(dǎo)向,擁有最高終端密度和效率的AMD EPYC 9704處理器“Bergamo”,以及面向技術(shù)計(jì)算領(lǐng)域的Genoa-X。其中,Genoa-X的亮點(diǎn)包括領(lǐng)先的5nm工藝節(jié)點(diǎn)技術(shù)、高達(dá)96個(gè)高性能Zen4核心、高達(dá)1.1GB的L3 Cache,兼容SP5插槽等,可以在Ansys CFX中每天完成更多的設(shè)計(jì)任務(wù),從而大幅加速產(chǎn)品開(kāi)發(fā)。

在今日活動(dòng)的演示現(xiàn)場(chǎng),記者看到采用 AMD EPYC 9654處理器運(yùn)行Llama 2大語(yǔ)言模型的展示,在同競(jìng)品Xeon Platinum 8480的對(duì)比中,處理運(yùn)行速度提升36%。這意味著,在某些場(chǎng)景下,依靠CPU提供的AI算力也能夠進(jìn)行大模型處理,而非僅依靠GPU,這對(duì)于具有較少GPU資源的企業(yè)而言非常具有吸引力,也帶來(lái)了成本上的節(jié)省。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • amd
    amd
    +關(guān)注

    關(guān)注

    25

    文章

    5376

    瀏覽量

    133375
  • 加速器
    +關(guān)注

    關(guān)注

    2

    文章

    785

    瀏覽量

    37144
  • 超級(jí)計(jì)算機(jī)

    關(guān)注

    2

    文章

    452

    瀏覽量

    41819
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    AMD EPYC 4004系列處理器成為中小型企業(yè)的信賴選擇

    AMD宣布推出AMD EPYC(霄龍) 4004系列處理器,該系列處理器以全新且經(jīng)過(guò)成本優(yōu)化的產(chǎn)品補(bǔ)充了現(xiàn)有AMD EPYC服務(wù)器
    的頭像 發(fā)表于 09-20 15:30 ?55次閱讀

    AMD全新處理器擴(kuò)大數(shù)據(jù)中心CPU的領(lǐng)先地位

    在Computex 2024 開(kāi)幕主題演講上,AMD 詳細(xì)介紹了全新的 CPU、NPU 和 GPU 領(lǐng)先架構(gòu),為從數(shù)據(jù)中心到個(gè)人電腦的端到端 AI 基礎(chǔ)架構(gòu)帶來(lái)強(qiáng)大算力。
    的頭像 發(fā)表于 09-19 11:01 ?249次閱讀

    第五代AMD EPYC處理器預(yù)計(jì)下半年發(fā)布

    近日,在Computex 2024上,AMD董事會(huì)主席及首席執(zhí)行官Lisa Su博士向大家預(yù)覽了具有超強(qiáng)性能的下一代 EPYC 處理器——第五代 AMD EPYC 處理器(代號(hào)“Tur
    的頭像 發(fā)表于 09-18 11:06 ?220次閱讀

    AMD推出全新AMD銳龍和EPYC處理器,擴(kuò)大數(shù)據(jù)中心和PC領(lǐng)域領(lǐng)先地位

    ——下一代?AMD EPYC?處理器將擴(kuò)大數(shù)據(jù)中心?CPU?的領(lǐng)先地位 ——全新?AMD?銳龍?AI 300?系列筆記本電腦和?
    的頭像 發(fā)表于 06-04 19:21 ?876次閱讀
    <b class='flag-5'>AMD</b>推出全新<b class='flag-5'>AMD</b>銳龍和<b class='flag-5'>EPYC</b>處理器,擴(kuò)大數(shù)據(jù)中心和PC領(lǐng)域領(lǐng)先地位

    為什么跑AI往往用GPU而不是CPU?

    GPU的能力,并且支持的GPU數(shù)量越多,就代表其AI性能越強(qiáng)大。那么問(wèn)題來(lái)了,為什么是GPU而不是CPU?
    的頭像 發(fā)表于 04-24 08:27 ?1509次閱讀
    為什么跑<b class='flag-5'>AI</b>往往用<b class='flag-5'>GPU</b>而不是<b class='flag-5'>CPU</b>?

    AI訓(xùn)練,為什么需要GPU

    隨著由ChatGPT引發(fā)的人工智能熱潮,GPU成為了AI模型訓(xùn)練平臺(tái)的基石,甚至是決定性的算力底座。為什么GPU能力壓CPU,成為炙手可熱
    的頭像 發(fā)表于 04-24 08:05 ?1075次閱讀
    <b class='flag-5'>AI</b>訓(xùn)練,為什么需要<b class='flag-5'>GPU</b>?

    AMD EPYC 8004系列處理器優(yōu)勢(shì)介紹

    AMD EPYC 8004系列處理器就是專為單路平臺(tái)設(shè)計(jì)的高能效處理器,它體積小巧,非常適合空間和功率有限的部署環(huán)境。
    發(fā)表于 04-15 11:30 ?269次閱讀
    <b class='flag-5'>AMD</b> <b class='flag-5'>EPYC</b> 8004系列處理器優(yōu)勢(shì)介紹

    國(guó)產(chǎn)GPUAI模型領(lǐng)域的應(yīng)用案例一覽

    電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)近一年多時(shí)間,隨著大模型的發(fā)展,GPUAI領(lǐng)域的重要性再次凸顯。雖然相比英偉達(dá)等國(guó)際大廠,國(guó)產(chǎn)GPU起步較晚、聲勢(shì)較小。不過(guò)近幾年,國(guó)內(nèi)不少
    的頭像 發(fā)表于 04-01 09:28 ?3430次閱讀
    國(guó)產(chǎn)<b class='flag-5'>GPU</b>在<b class='flag-5'>AI</b>大<b class='flag-5'>模型</b>領(lǐng)域的應(yīng)用案例一覽

    AMD EPYC處理器:AI推理能力究竟有多強(qiáng)?

    如今,AMD EPYC處理器已經(jīng)成為最常被選擇用于AI推理的服務(wù)器平臺(tái),尤其是第四代Genoa EPYC 9004系列,執(zhí)行AI推理的能力又
    發(fā)表于 03-15 09:47 ?348次閱讀

    AMD Instinct加速器、AMD EPYC處理器為Microsoft帶來(lái)全新AI和計(jì)算能力

    VM — ? 近日,在Microsoft Ignite全球技術(shù)大會(huì)上,AMD和Microsoft共同展示了包括即將到來(lái)的AMD Instinct加速器、AMD EPYC(霄龍)
    的頭像 發(fā)表于 12-04 13:54 ?503次閱讀

    AMD擴(kuò)展其第三代AMD EPYC處理器家族并推出6款全新產(chǎn)品

    AMD加強(qiáng)廣受好評(píng)的第三代EPYC CPU產(chǎn)品組合,為支持主要業(yè)務(wù)基礎(chǔ)設(shè)施的服務(wù)器提供性能和能效— —包括Cisco、Dell Technologies、Gigabyte、HPE、Lenovo
    的頭像 發(fā)表于 11-11 10:37 ?1192次閱讀

    超微收購(gòu)Nod.ai 提升開(kāi)源AI軟件實(shí)力

    加速器、Ryzen AI處理器、EPYC處理器、Versal系統(tǒng)單晶片(SoC)以及Radeon顯示卡等最佳化的AI解決方案部署。這項(xiàng)協(xié)議與AMD以開(kāi)放軟件產(chǎn)業(yè)體系為主軸的
    的頭像 發(fā)表于 10-16 16:55 ?699次閱讀

    【KV260視覺(jué)入門(mén)套件試用體驗(yàn)】Vitis AI 構(gòu)建開(kāi)發(fā)環(huán)境,并使用inspector檢查模型

    Vitis AI 的所有工具和庫(kù),而不需要在本地安裝任何依賴。CPU版本的Vitis AI docker 可以在沒(méi)有 GPU 的機(jī)器上運(yùn)行,但是
    發(fā)表于 10-14 15:34

    面向電信和邊緣應(yīng)用的新一代EPYC處理器Siena

    Hot Chips 2023大會(huì)上,AMD展示了一系列新產(chǎn)品,包括備受期待的AMD EPYC Genoa、Genoa-X和Bergamo CPU。
    的頭像 發(fā)表于 10-11 14:53 ?621次閱讀
    面向電信和邊緣應(yīng)用的新一代<b class='flag-5'>EPYC</b>處理器Siena

    AMD擴(kuò)展第四代EPYC CPU產(chǎn)品帶來(lái)突破性的性能

    ,如今,技術(shù)計(jì)算可支持更快的設(shè)計(jì)迭代和更強(qiáng)大的模擬,以幫助企業(yè)設(shè)計(jì)新的引人注目的產(chǎn)品。 2023年6月,AMD 推出了采用 AMD 3D V-Cache技術(shù)的第四代 AMD EPYC
    的頭像 發(fā)表于 10-07 14:54 ?820次閱讀