電子發(fā)燒友網(wǎng)報道(文/周凱揚)要說RISC-V社區(qū)最炙手可熱的AI芯片初創(chuàng)公司,除了Ventana和Tenstorrent的話,當屬打造出千核RISC-V芯片ET-SoC-1的Esperanto了。近日,Esperanto公開了他們在AI軟件生態(tài)上所做的進一步努力,也透露了下一代千核RISC-V芯片的部分細節(jié)。
下一代千核RISC-V處理器結(jié)合HPC和ML
ET-SoC-1作為專門用于機器學(xué)習(xí),尤其是推薦系統(tǒng)這類AI負載的RISC-V處理器,采用臺積電7nm工藝打造,集成了1092個低功耗RISC-V核心。這上千個RISC-V核心中包括1088個ET-Minion核心,用于ML應(yīng)用的計算,而另外4個ET-Maxion核心則提供更高的單線程性能,用于運行操作系統(tǒng)等任務(wù)。
根據(jù)ET-Minion工作頻率的不同,ET-SoC-1的峰值算力在100到200TOPS之間,大多數(shù)負載下功耗甚至不會超過20W,不過單個PCIe模塊由于集成了DRAM等組件,還是會達到30多瓦的功耗,可這已經(jīng)是很優(yōu)異的表現(xiàn)了。
但ET-SoC-1畢竟從一開始就是為了ML這種低精度運算的應(yīng)用而設(shè)計的,至于多數(shù)利用雙精度計算的HPC領(lǐng)域,ET-SoC-1是沒辦法打入這一市場的。為此,Esperanto計劃打破CPU+GPU或CPU+其他加速器的現(xiàn)狀,讓RISC-V芯片從HPC和ML兩個方向同時下手,這一解決方案正是他們尚在研發(fā)的ET-SoC-2處理器。
ET-SoC-1已經(jīng)證明了RISC-V非常適合用于機器學(xué)習(xí),而ET-SoC-2則打算同時攻克HPC計算。據(jù)Esperanto所述,ET-SoC-2的目標是除了支持FP16/FP8外,還要引入對FP64/FP32高精度的支持,并實現(xiàn)10Tflops以上的FP64算力。
為此他們將采用更為先進的半導(dǎo)體工藝,以及全新的HBM內(nèi)存,同時還要進一步提高擴展性,可以將大量芯片無縫組合在一起,共享龐大的內(nèi)存與計算資源。即便有了如此強勁的性能,Esperanto依然將低功耗作為設(shè)計目標之一,其表示未來五年內(nèi),基于RISC-V的超算系統(tǒng)一定會在Green500這一能效榜單上名列前茅。
軟件生態(tài)仍需努力
即便芯片設(shè)計中RISC-V在算力上能與其他GPU、AI加速器媲美,但沒有軟件生態(tài)的支持是遠遠不夠的。屆時必將面臨絕大多數(shù)新AI芯片橫亙在眼前的問題,那就是開發(fā)者更愿意去選擇軟件生態(tài)成熟度更高的GPU。
所以Esperanto也已經(jīng)開始了加速其芯片的軟件支持,比如將Meta的LLM移植到ET-SoC-1上。同時Esperanto也推出了針對ET-SoC-1的通用SDK,允許開發(fā)者對1024個ET-Minion核心并行編程。但這些努力也只能算是走出了第一步而已,對于服務(wù)器這個通用性稱王的市場,如果沒辦法運行大部分主流的AI模型,客戶借助該硬件打造應(yīng)用程序的意愿也會大大降低。
這也就是為何大部分AI初創(chuàng)公司也要建立規(guī)模不小軟件團隊的原因,除了需要支持和優(yōu)化主流AI模型與框架外,還需要對部分服務(wù)器軟件進行移植??绮贿^這個門檻的話,始終難以邁進主流市場。
寫在最后
最近另一家RISC-V AI芯片初創(chuàng)公司Tenstorrent,也從現(xiàn)代、起亞和三星這一眾韓國廠商那拿到了1億美元的投資。由此可以看出,AI芯片會是RISC-V開發(fā)的下一個大方向,無論是汽車芯片,還是數(shù)據(jù)中心加速器,都會進一步推動RISC-V在AI擴展指令上的標準化加速。
下一代千核RISC-V處理器結(jié)合HPC和ML
ET-SoC-1作為專門用于機器學(xué)習(xí),尤其是推薦系統(tǒng)這類AI負載的RISC-V處理器,采用臺積電7nm工藝打造,集成了1092個低功耗RISC-V核心。這上千個RISC-V核心中包括1088個ET-Minion核心,用于ML應(yīng)用的計算,而另外4個ET-Maxion核心則提供更高的單線程性能,用于運行操作系統(tǒng)等任務(wù)。
根據(jù)ET-Minion工作頻率的不同,ET-SoC-1的峰值算力在100到200TOPS之間,大多數(shù)負載下功耗甚至不會超過20W,不過單個PCIe模塊由于集成了DRAM等組件,還是會達到30多瓦的功耗,可這已經(jīng)是很優(yōu)異的表現(xiàn)了。
但ET-SoC-1畢竟從一開始就是為了ML這種低精度運算的應(yīng)用而設(shè)計的,至于多數(shù)利用雙精度計算的HPC領(lǐng)域,ET-SoC-1是沒辦法打入這一市場的。為此,Esperanto計劃打破CPU+GPU或CPU+其他加速器的現(xiàn)狀,讓RISC-V芯片從HPC和ML兩個方向同時下手,這一解決方案正是他們尚在研發(fā)的ET-SoC-2處理器。
ET-SoC-1已經(jīng)證明了RISC-V非常適合用于機器學(xué)習(xí),而ET-SoC-2則打算同時攻克HPC計算。據(jù)Esperanto所述,ET-SoC-2的目標是除了支持FP16/FP8外,還要引入對FP64/FP32高精度的支持,并實現(xiàn)10Tflops以上的FP64算力。
為此他們將采用更為先進的半導(dǎo)體工藝,以及全新的HBM內(nèi)存,同時還要進一步提高擴展性,可以將大量芯片無縫組合在一起,共享龐大的內(nèi)存與計算資源。即便有了如此強勁的性能,Esperanto依然將低功耗作為設(shè)計目標之一,其表示未來五年內(nèi),基于RISC-V的超算系統(tǒng)一定會在Green500這一能效榜單上名列前茅。
軟件生態(tài)仍需努力
即便芯片設(shè)計中RISC-V在算力上能與其他GPU、AI加速器媲美,但沒有軟件生態(tài)的支持是遠遠不夠的。屆時必將面臨絕大多數(shù)新AI芯片橫亙在眼前的問題,那就是開發(fā)者更愿意去選擇軟件生態(tài)成熟度更高的GPU。
所以Esperanto也已經(jīng)開始了加速其芯片的軟件支持,比如將Meta的LLM移植到ET-SoC-1上。同時Esperanto也推出了針對ET-SoC-1的通用SDK,允許開發(fā)者對1024個ET-Minion核心并行編程。但這些努力也只能算是走出了第一步而已,對于服務(wù)器這個通用性稱王的市場,如果沒辦法運行大部分主流的AI模型,客戶借助該硬件打造應(yīng)用程序的意愿也會大大降低。
這也就是為何大部分AI初創(chuàng)公司也要建立規(guī)模不小軟件團隊的原因,除了需要支持和優(yōu)化主流AI模型與框架外,還需要對部分服務(wù)器軟件進行移植??绮贿^這個門檻的話,始終難以邁進主流市場。
寫在最后
最近另一家RISC-V AI芯片初創(chuàng)公司Tenstorrent,也從現(xiàn)代、起亞和三星這一眾韓國廠商那拿到了1億美元的投資。由此可以看出,AI芯片會是RISC-V開發(fā)的下一個大方向,無論是汽車芯片,還是數(shù)據(jù)中心加速器,都會進一步推動RISC-V在AI擴展指令上的標準化加速。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。
舉報投訴
-
RISC-V
+關(guān)注
關(guān)注
44文章
2204瀏覽量
45958
發(fā)布評論請先 登錄
相關(guān)推薦
RISC-V,即將進入應(yīng)用的爆發(fā)期
RISC-V是一種開放標準指令集架構(gòu) (ISA),最初由加州大學(xué)伯克利分校的研究人員于2010年開發(fā)。業(yè)界稱,這種開源特性為芯片設(shè)計者提供了極大的靈活性,可以根據(jù)具體需求定制AI加速器
發(fā)表于 10-31 16:06
RISC-V擁有巨大市場潛力的原因
旬發(fā)布了第三代“香山”開源高性能RISC-V處理器核,其性能水平已進入全球第一梯隊,可廣泛應(yīng)用于服務(wù)器
發(fā)表于 09-30 14:20
RISC-V Summit China 2024 | 青稞RISC-V+接口PHY,賦能RISC-V高效落地
RISC-V內(nèi)核+接口底層根技術(shù)”的自研體系,深度剖析了全棧研發(fā)模式在推動RISC-V應(yīng)用落地上的原生優(yōu)勢。
青稞RISC-V將芯片技術(shù)自主進一
發(fā)表于 08-30 17:37
2024 RISC-V 中國峰會:華秋電子助力RISC-V生態(tài)!
掌握RISC-V芯片的應(yīng)用與開發(fā),電子發(fā)燒友作為緊密合作伙伴,依托650萬+開發(fā)者用戶,全力構(gòu)建包含RISC-V開發(fā)者社區(qū)、RISC-V技術(shù)商業(yè)生態(tài)圈及
發(fā)表于 08-26 16:46
下一代高功能新一代AI加速器(DRP-AI3):10x在高級AI系統(tǒng)高級AI中更快的嵌入處理
電子發(fā)燒友網(wǎng)站提供《下一代高功能新一代AI加速器(DRP-AI3):10x在高級AI系統(tǒng)高級AI中更快的嵌入處理.pdf》資料免費下載
發(fā)表于 08-15 11:06
?0次下載
rIsc-v的缺的是什么?
的設(shè)計相對簡潔和模塊化,但其實現(xiàn)仍然需要較高的技術(shù)水平和專業(yè)知識。對于一些小型企業(yè)或初創(chuàng)公司來說,可能難以獨立承擔RISC-V芯片的研發(fā)和生產(chǎn)工作。因此,RISC-V的發(fā)展還需要得到更
發(fā)表于 07-29 17:18
RISC-V在中國的發(fā)展機遇有哪些場景?
。RISC-V結(jié)合AI加速器,可以在AI領(lǐng)域提供高效的計算解決方案。
定制化需求:RISC-V允許添加專門的加速器或協(xié)處理器來處理特定任務(wù),
發(fā)表于 07-29 17:14
為什么要有RISC-V
RISC-V(“RISC five”)的目標是成為一個通用的指令集架構(gòu)(ISA):①、它要能適應(yīng)包括從最袖珍的嵌入式控制器,到最快的高性能計算機等各種規(guī)模的處理
發(fā)表于 07-27 15:05
RISC-V的MCU與ARM對比
擴展,實現(xiàn)特定功能或加速器。
性能與功耗
RISC-V :RISC-V適合用于高效設(shè)計實現(xiàn),其全部RISC-V指令不超過50個,因此其內(nèi)核面積更小,相應(yīng)的功耗更低。此外,
發(fā)表于 05-27 15:58
RISC-V在服務(wù)器方面應(yīng)用與發(fā)展前景
RISC-V在服務(wù)器方面的應(yīng)用與發(fā)展前景十分廣闊。作為一種開源、開放、簡潔、靈活的指令集,RISC-V近年來在芯片產(chǎn)業(yè)中發(fā)展迅速,并逐漸引領(lǐng)
發(fā)表于 04-28 09:04
RISC-V在服務(wù)器方面的應(yīng)用與發(fā)展前景如何?剛畢業(yè)的學(xué)生才開始學(xué)來的及嗎?
RISC-V在服務(wù)器方面的應(yīng)用與發(fā)展前景十分廣闊。作為一種開源、開放、簡潔、靈活的指令集,RISC-V近年來在芯片產(chǎn)業(yè)中發(fā)展迅速,并逐漸引領(lǐng)
發(fā)表于 04-28 08:49
Rivos完成2.5億美元A輪融資,用于研發(fā)AI工作負載 RISC-V計算加速
Rivos創(chuàng)立于2021年,總部設(shè)于美國加利福尼亞州,專注于設(shè)計和生產(chǎn)RISC-V芯片。盡管在A輪融資后未披露芯片詳細架構(gòu),但據(jù)稱其結(jié)合了高性能RISC-V CPU和數(shù)據(jù)并行
新思科技如何助力RISC-V SoCs性能“超級加倍”?
近日,新思科技作為玄鐵的重要生態(tài)合作伙伴,受邀參加了2024玄鐵RISC-V生態(tài)大會。與眾多合作伙伴共同探討如何讓RISC-V SoCs設(shè)計受益,為產(chǎn)品上市時間和部署下一代技術(shù)樹立全新標準。
【RISC-V開放架構(gòu)設(shè)計之道|閱讀體驗】 RISC-V設(shè)計必備之案頭小冊
。在書中,特別提到了匯編器對于RISC-V中的作用,包括當講寄存器硬連線為0時,可以使用偽指令來簡化常規(guī)操作,如跳轉(zhuǎn)、返回和等于零時分支等。
浮點運算和壓縮指令數(shù)據(jù)集的知識則是放在下一
發(fā)表于 01-22 16:24
定制化物聯(lián)網(wǎng)/汽車芯片,Codasip RISC-V處理器IP與開發(fā)工具的組合拳
移動和物聯(lián)網(wǎng)。10月高通聯(lián)合谷歌開發(fā)基于RISC-V架構(gòu)的Snapdragon Wear芯片,用于下一代Wear OS手表。RISC-V應(yīng)用在巨頭們的引領(lǐng)下
評論