0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

ChatGPT帶旺HBM存儲

花茶晶晶 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:黃晶晶綜合報(bào)道 ? 2023-02-15 15:14 ? 次閱讀

據(jù)韓媒報(bào)道,自今年年初以來,三星電子和SK海力士的高帶寬存儲器(HBM)訂單激增。盡管HBM具有優(yōu)異的性能,但其應(yīng)用比一般DRAM少。這是因?yàn)镠BM的平均售價(jià)(ASP)至少是DRAM的三倍。HBM需要復(fù)雜的生產(chǎn)過程和高度先進(jìn)的技術(shù)。人工智能服務(wù)的擴(kuò)展扭轉(zhuǎn)了局面。一位業(yè)內(nèi)人士表示,“與性能最高的DRAM相比,HBM3的價(jià)格上漲了五倍。”

據(jù)了解,目前SK海力士在HBM市場處于領(lǐng)先地位,約有60%-70%的份額。HBM(高帶寬存儲器)是高價(jià)值、高性能存儲器,垂直互連多個(gè)DRAM芯片,與傳統(tǒng)DRAM產(chǎn)品相比顯著提高數(shù)據(jù)處理速度。SK海力士 HBM3 DRAM是繼HBM(第一代)、HBM2(第二代)和HBM2E(第三代)之后的第四代HBM產(chǎn)品。

SK海力士介紹,其HBM3的容量是HBM2E的1.5倍,從12個(gè)DRAM管芯堆疊到相同的總封裝高度,適合AI和HPC等功率容量密集型應(yīng)用。單個(gè)立方體可以產(chǎn)生高達(dá)819GB/s的帶寬,而在同一硅片上具有六個(gè)HBM芯片的SiP(系統(tǒng)封裝)可以實(shí)現(xiàn)高達(dá)4.8TB/s的帶寬,以支持exascale需求。

來源:SK海力士


來源:SK海力士


SK hynix HBM3還具有一個(gè)強(qiáng)大的、定制的片上ECC(糾錯(cuò)碼),它使用預(yù)先分配的奇偶校驗(yàn)位來檢查和糾正接收數(shù)據(jù)中的錯(cuò)誤。嵌入式電路允許DRAM自校正單元內(nèi)的錯(cuò)誤,顯著提高了器件可靠性。

去年6月,SK海力士宣布其HBM3將與NVIDIA H100 Tensor Core GPU結(jié)合用于加速計(jì)算。SK hynix的HBM3有望通過高達(dá)819GB/s的內(nèi)存帶寬增強(qiáng)加速計(jì)算性能,相當(dāng)于每秒傳輸163部FHD(全高清)電影(5GB標(biāo)準(zhǔn))。在NVIDIA完成對SK海力士HBM3樣品的性能評估后,SK hynix于2022年第三季度開始發(fā)貨。

三星推出HBM3 Icebolt,專為數(shù)據(jù)中心加速,減輕高性能計(jì)算負(fù)荷,充分挖掘人工智能 (AI) 潛能的存儲芯片。HBM3 Icebolt 高帶寬存儲采用 12 層高速 DRAM,擁有更快速度、更高能效和更大容量。


HBM3 Icebolt 以高達(dá) 6.4Gbps 處理速度和高達(dá) 819GB/s 的帶寬將性能提升到新高度。比上一代產(chǎn)品快將近 1.8 倍。

借助專為數(shù)據(jù)中心加速而設(shè)計(jì)的 HBM,讓數(shù)據(jù)發(fā)揮更大作用。HBM3 Icebolt 采用 12 層 10 納米級 16 Gb DRAM die堆疊,實(shí)現(xiàn) 24GB 的存儲容量,24GB是三星前代產(chǎn)品HBM2E的 1.5 倍。利用新型解決方案打造更強(qiáng)大的神經(jīng)網(wǎng)絡(luò),并以更快的速度處理數(shù)據(jù)。

處理速度更快,存儲容量更大,但能效比卻明顯高于上一代HBM2E。HBM3 Icebolt 具有前所未有的強(qiáng)大能力,采用超高效設(shè)計(jì),能效比上一代產(chǎn)品提高了 10%。因此,能提高性能同時(shí)減輕服務(wù)器的負(fù)擔(dān)。

HBM3 Icebolt即使在提供更高速度的情況下,仍然提供增強(qiáng)型自我校正功能,從而保證數(shù)據(jù)可靠性。HBM3 Icebolt 解決方案可校正所有 16 位錯(cuò)誤 - 相較于僅校正單比特錯(cuò)誤的上一代產(chǎn)品HBM2E,ODECC 能力實(shí)現(xiàn)巨大飛躍。因此,能夠消除更多錯(cuò)誤,更好的防止數(shù)據(jù)損壞,保持你數(shù)據(jù)的穩(wěn)定性和安全性。

與傳統(tǒng)DRAM相比,HBM在數(shù)據(jù)處理速度和性能方面具有顯著的競爭力。ChatGPT大火帶動(dòng)人工智能和數(shù)據(jù)中心建設(shè)投入升級,也必將帶動(dòng)HBM產(chǎn)品的需求增長。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 存儲
    +關(guān)注

    關(guān)注

    13

    文章

    4226

    瀏覽量

    85577
  • HBM
    HBM
    +關(guān)注

    關(guān)注

    0

    文章

    365

    瀏覽量

    14681
  • ChatGPT
    +關(guān)注

    關(guān)注

    29

    文章

    1546

    瀏覽量

    7359
收藏 人收藏

    評論

    相關(guān)推薦

    HBM4到來前夕,HBM熱出現(xiàn)兩極分化

    電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)高帶寬存儲HBM由于生成式AI的到來而異軍突起,成為AI訓(xùn)練不可或缺的存儲產(chǎn)品。三大HBM廠商SK海力士、三星電子、美光科技也因
    的頭像 發(fā)表于 09-23 12:00 ?2505次閱讀

    生成式AI飛,三大存儲產(chǎn)品齊漲價(jià)

    ? 電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)生成式AI對存儲芯片拉動(dòng)最顯著的莫過于HBM,由于GPU搭配HBM可用于AI訓(xùn)練,三大存儲芯片廠商積極投入HBM
    的頭像 發(fā)表于 06-16 09:05 ?2907次閱讀

    被稱為“小號HBM”,華邦電子CUBE進(jìn)階邊緣AI存儲

    ,分享了華邦推出的CUBE產(chǎn)品在邊緣AI上的應(yīng)用優(yōu)勢以及對存儲應(yīng)用市場的看法等話題。 ? CUBE :小號HBM ? “華邦電子近兩三年都在推CUBE產(chǎn)品,我們可以把CUBE形象地看作小號的HBM?!敝斓险f道,推動(dòng)AI落地和發(fā)展
    的頭像 發(fā)表于 07-01 16:21 ?2849次閱讀

    EVASH Ultra EEPROM:助力ChatGPT等AI應(yīng)用的嵌入式存儲解決方案

    EVASH Ultra EEPROM:助力ChatGPT等AI應(yīng)用的嵌入式存儲解決方案
    的頭像 發(fā)表于 06-26 18:13 ?815次閱讀

    OpenAI 深夜拋出王炸 “ChatGPT- 4o”, “她” 來了

    當(dāng)?shù)貢r(shí)間5月13日OpenAI推出ChatGPT-4o,代表了人工智能向前邁出的一大步。在GPT-4turbo的強(qiáng)大基礎(chǔ)上,這種迭代擁有顯著的改進(jìn)。在發(fā)布會(huì)的演示中,OpenAI展示該模型的高級
    發(fā)表于 05-27 15:43

    SK海力士HBM4E存儲器提前一年量產(chǎn)

    SK海力士公司近日在首爾舉辦的IEEE 2024國際存儲研討會(huì)上,由先進(jìn)HBM技術(shù)團(tuán)隊(duì)負(fù)責(zé)人Kim Kwi-wook宣布了一項(xiàng)重要進(jìn)展。SK海力士計(jì)劃從2026年開始,提前一年量產(chǎn)其第七代高帶寬存儲
    的頭像 發(fā)表于 05-15 11:32 ?757次閱讀

    在FPGA設(shè)計(jì)中是否可以應(yīng)用ChatGPT生成想要的程序呢

    當(dāng)下AI人工智能崛起,很多開發(fā)領(lǐng)域都可看到ChatGPT的身影,F(xiàn)PGA設(shè)計(jì)中,是否也可以用ChatGPT輔助設(shè)計(jì)呢?
    發(fā)表于 03-28 23:41

    SK海力士成功量產(chǎn)超高性能AI存儲HBM3E

    HBM3E的推出,標(biāo)志著SK海力士在高性能存儲器領(lǐng)域取得了重大突破,將現(xiàn)有DRAM技術(shù)推向了新的高度。
    的頭像 發(fā)表于 03-20 15:23 ?994次閱讀

    SK海力士HBM3E正式量產(chǎn),鞏固AI存儲領(lǐng)域的領(lǐng)先地位

    SK海力士作為HBM3E的首發(fā)玩家,預(yù)計(jì)這款最新產(chǎn)品的大批量投產(chǎn)及其作為業(yè)內(nèi)首家供應(yīng)HBM3制造商所累積的經(jīng)驗(yàn),將進(jìn)一步強(qiáng)化公司在AI存儲器市場的領(lǐng)導(dǎo)者地位。
    的頭像 發(fā)表于 03-19 15:18 ?937次閱讀

    HBMHBM2、HBM3和HBM3e技術(shù)對比

    AI服務(wù)器出貨量增長催化HBM需求爆發(fā),且伴隨服務(wù)器平均HBM容量增加,經(jīng)測算,預(yù)期25年市場規(guī)模約150億美元,增速超過50%。
    發(fā)表于 03-01 11:02 ?1137次閱讀
    <b class='flag-5'>HBM</b>、<b class='flag-5'>HBM</b>2、<b class='flag-5'>HBM</b>3和<b class='flag-5'>HBM</b>3e技術(shù)對比

    【國產(chǎn)FPGA+OMAPL138開發(fā)板體驗(yàn)】(原創(chuàng))6.FPGA連接ChatGPT 4

    (output_text) ); // 用于存儲用戶輸入的文本 reg [255:0] input_text; // 用于存儲ChatGPT4的響應(yīng) wire [255:0
    發(fā)表于 02-14 21:58

    深度解析HBM內(nèi)存技術(shù)

    HBM作為基于3D堆棧工藝的高性能DRAM,打破內(nèi)存帶寬及功耗瓶頸。HBM(High Bandwidth Memory)即高帶寬存儲器,通過使用先進(jìn)封裝(如TSV硅通孔、微凸塊)將多個(gè)DRAM芯片進(jìn)行堆疊,并與GPU一同進(jìn)行封裝
    的頭像 發(fā)表于 01-02 09:59 ?4789次閱讀
    深度解析<b class='flag-5'>HBM</b>內(nèi)存技術(shù)

    AI大模型不斷拉高上限,內(nèi)存控制器IP提早部署,力拱HBM3E的到來

    數(shù)據(jù)量、復(fù)雜度在增加,HBM內(nèi)存被徹底火。這種高帶寬高速的內(nèi)存十分適合于AI訓(xùn)練場景。最近,內(nèi)存芯片廠商已經(jīng)不約而同地切入HBM3E競爭當(dāng)中。內(nèi)存控制器IP廠商Rambus也率先發(fā)布HBM
    的頭像 發(fā)表于 12-13 15:33 ?1393次閱讀
    AI大模型不斷拉高上限,內(nèi)存控制器IP提早部署,力拱<b class='flag-5'>HBM</b>3E的到來

    大模型時(shí)代必備存儲HBM進(jìn)入汽車領(lǐng)域

    大模型時(shí)代AI芯片必備HBM內(nèi)存已是業(yè)內(nèi)共識,存儲帶寬也成為AI芯片僅次于算力的第二關(guān)健指標(biāo),甚至某些場合超越算力,是最關(guān)鍵的性能指標(biāo),而汽車行業(yè)也開始出現(xiàn)HBM內(nèi)存。
    發(fā)表于 12-12 10:38 ?745次閱讀
    大模型時(shí)代必備<b class='flag-5'>存儲</b>之<b class='flag-5'>HBM</b>進(jìn)入汽車領(lǐng)域

    HBM4為何備受存儲行業(yè)關(guān)注?

    當(dāng)前,生成式人工智能已經(jīng)成為推動(dòng)DRAM市場增長的關(guān)鍵因素,與處理器一起處理數(shù)據(jù)的HBM的需求也必將增長。未來,隨著AI技術(shù)不斷演進(jìn),HBM將成為數(shù)據(jù)中心的標(biāo)準(zhǔn)配置,而以企業(yè)應(yīng)用為重點(diǎn)場景的存儲卡供應(yīng)商期望提供更快的接口。
    發(fā)表于 12-02 16:30 ?420次閱讀
    <b class='flag-5'>HBM</b>4為何備受<b class='flag-5'>存儲</b>行業(yè)關(guān)注?