電子發(fā)燒友網(wǎng)報道(文/李彎彎)近一年多時間,隨著大模型的發(fā)展,GPU在AI領(lǐng)域的重要性再次凸顯。雖然相比英偉達(dá)等國際大廠,國產(chǎn)GPU起步較晚、聲勢較小。不過近幾年,國內(nèi)不少GPU廠商成長非常快,并且不斷推出新品,產(chǎn)品也逐漸在各個領(lǐng)域取得應(yīng)用,而且在大模型的訓(xùn)練和推理方面,也有所建樹。
國產(chǎn)GPU在大模型上的應(yīng)用進展
電子發(fā)燒友此前就統(tǒng)計過目前國內(nèi)主要的GPU廠商,也介紹了這些廠商主要的產(chǎn)品及產(chǎn)品發(fā)布、量產(chǎn)進展情況??梢钥吹?,其實近幾年已經(jīng)有不少產(chǎn)品面世并應(yīng)用。
如沐曦集成,其N系列用于AI推理的GPU芯片早已量產(chǎn)。去年9月,該公司宣布,其與眸瑞科技聯(lián)合發(fā)布了首個AI模型“貼圖超分”技術(shù)。該技術(shù)依托曦思N系列AI推理GPU首款產(chǎn)品曦思N100的強大算力,結(jié)合眸瑞科技豐富的算法庫資源和先進的AI超分算法,首次將AI超分成功應(yīng)用到了3D模型領(lǐng)域。
曦思N100是沐曦面向人工智能推理場景推出的高效能GPU產(chǎn)品,針對AI推理及AI應(yīng)用場景中大量的視頻圖像處理任務(wù),提供強大的AI算力和視頻/圖像編解碼功能。據(jù)稱,目前沐曦已聯(lián)合合作伙伴打造了多種基于曦思N100 的解決方案,如高密度視頻結(jié)構(gòu)化分析解決方案、高并發(fā)智能轉(zhuǎn)碼解決方案、光電混合異構(gòu)計算解決方案等,這些方案可廣泛應(yīng)用于城市安防、智慧交通、工業(yè)視覺、短視頻、云計算和智算中心等多個領(lǐng)域。
再如天數(shù)智芯,其提供的算力集群具有支持百億級參數(shù)大模型訓(xùn)練的能力。早前有消息,天數(shù)智芯與智源研究院、愛特云翔合作,開展基于自主通用GPU的大模型CodeGen(高效編碼)項目,通過中文描述來生成可用的C、Java、Python代碼以實現(xiàn)高效編碼。
智源研究院負(fù)責(zé)算法設(shè)計、訓(xùn)練框架開發(fā)、大模型的訓(xùn)練與調(diào)優(yōu),天數(shù)智芯負(fù)責(zé)提供天垓100加速卡、構(gòu)建算力集群及全程技術(shù)支持,愛特云翔負(fù)責(zé)提供算存網(wǎng)基礎(chǔ)硬件及智能化運維服務(wù)。在天垓100加速卡的算力集群,基于智源研究院70億參數(shù)的Aquila語言基礎(chǔ)模型,使用代碼數(shù)據(jù)進行繼續(xù)訓(xùn)練,穩(wěn)定運行19天,模型收斂效果符合預(yù)期。
近一年多來,隨著大模型的發(fā)展,國產(chǎn)GPU公司都在朝著大模型領(lǐng)域布局。摩爾線程此前也透露,公司已經(jīng)可以支持3億參數(shù)量模型的訓(xùn)練,2022年底就提前布局了自然語言模型預(yù)訓(xùn)練,自研了MusaBert模型。
還有登臨科技,該公司此前也表示,公司首款產(chǎn)品Goldwasser已規(guī)?;\用在多家行業(yè)知名企業(yè)的主營業(yè)務(wù)中,新一代Goldwasser產(chǎn)品針對基于Transformer的網(wǎng)絡(luò)和生成式AI類大模型的應(yīng)用在性能有大幅提升。
國產(chǎn)GPU應(yīng)用于AI領(lǐng)域的多個方面
除了上述談到應(yīng)用案例,國產(chǎn)GPU在AI領(lǐng)域的應(yīng)用案例還有很多,主要涉及到深度學(xué)習(xí)、自然語言處理以及計算機視覺等多個方面。
如,在計算機視覺領(lǐng)域,國產(chǎn)GPU被廣泛應(yīng)用于圖像識別和目標(biāo)檢測等任務(wù)。例如,利用GPU加速的深度學(xué)習(xí)模型可以大幅提升算法的準(zhǔn)確性和實時性,這在安防監(jiān)控、自動駕駛等實際應(yīng)用中具有重要的價值。
在自然語言處理方面,國產(chǎn)GPU也在發(fā)揮重要作用。通過GPU加速的循環(huán)神經(jīng)網(wǎng)絡(luò)、Transformer等模型,可以實現(xiàn)高效的機器翻譯、文本生成等任務(wù)。這對于提升智能客服、智能寫作等應(yīng)用的性能具有關(guān)鍵作用。
國產(chǎn)GPU還在強化學(xué)習(xí)領(lǐng)域得到了應(yīng)用。強化學(xué)習(xí)是AI領(lǐng)域的一個重要分支,其目標(biāo)是通過與環(huán)境的交互來學(xué)習(xí)策略。GPU加速的價值網(wǎng)絡(luò)、策略網(wǎng)絡(luò)等模型可以應(yīng)用于游戲AI、機器人控制等領(lǐng)域,從而提高智能體的學(xué)習(xí)效率和性能。
另外值得關(guān)注的還有,國產(chǎn)GPU在自動駕駛領(lǐng)域的應(yīng)用也比較多。自動駕駛系統(tǒng)需要處理大量的傳感器數(shù)據(jù),包括來自攝像頭、雷達(dá)、激光雷達(dá)等的信息。GPU通過其強大的并行計算能力和高效的內(nèi)存管理,可以實時處理這些數(shù)據(jù),并為自動駕駛系統(tǒng)提供準(zhǔn)確的決策依據(jù)。
例如,一些國產(chǎn)汽車廠商已經(jīng)開始在其自動駕駛系統(tǒng)中采用國產(chǎn)GPU。這些GPU不僅用于圖像處理和計算機視覺任務(wù),如目標(biāo)檢測、車道線識別等,還用于深度學(xué)習(xí)模型的推理和決策。通過GPU的加速,自動駕駛系統(tǒng)可以更快地識別交通信號、障礙物以及其他重要信息,從而提高行車安全性。
此外,國產(chǎn)GPU還在自動駕駛的地圖構(gòu)建和定位方面發(fā)揮了重要作用。通過利用GPU進行高效的地圖數(shù)據(jù)處理和實時定位計算,自動駕駛系統(tǒng)可以更加準(zhǔn)確地感知周圍環(huán)境,并實現(xiàn)精確的導(dǎo)航和路徑規(guī)劃。
具體來說,百度Apollo、小馬智行等自動駕駛技術(shù)公司,都在其自動駕駛解決方案中采用了國產(chǎn)GPU。這些解決方案不僅應(yīng)用于乘用車,還擴展到商用車、物流車等多個領(lǐng)域。
寫在最后
從目前的情況來看,國內(nèi)外GPU廠商都在追逐大模型應(yīng)用帶來的機會。當(dāng)前無論是大模型訓(xùn)練還是推理,英偉達(dá)GPU都占據(jù)了絕大部分市場。對于國產(chǎn)廠商來說,為了在大模型方面擁有更多自主權(quán),仍然需要持續(xù)在大模型訓(xùn)練方面發(fā)力,同時相對大模型訓(xùn)練來說,大模型接下來大面積的部署,對于推理芯片的需要將會很大,這將是一個更容易把握的機會。
國產(chǎn)GPU在大模型上的應(yīng)用進展
電子發(fā)燒友此前就統(tǒng)計過目前國內(nèi)主要的GPU廠商,也介紹了這些廠商主要的產(chǎn)品及產(chǎn)品發(fā)布、量產(chǎn)進展情況??梢钥吹?,其實近幾年已經(jīng)有不少產(chǎn)品面世并應(yīng)用。
如沐曦集成,其N系列用于AI推理的GPU芯片早已量產(chǎn)。去年9月,該公司宣布,其與眸瑞科技聯(lián)合發(fā)布了首個AI模型“貼圖超分”技術(shù)。該技術(shù)依托曦思N系列AI推理GPU首款產(chǎn)品曦思N100的強大算力,結(jié)合眸瑞科技豐富的算法庫資源和先進的AI超分算法,首次將AI超分成功應(yīng)用到了3D模型領(lǐng)域。
曦思N100是沐曦面向人工智能推理場景推出的高效能GPU產(chǎn)品,針對AI推理及AI應(yīng)用場景中大量的視頻圖像處理任務(wù),提供強大的AI算力和視頻/圖像編解碼功能。據(jù)稱,目前沐曦已聯(lián)合合作伙伴打造了多種基于曦思N100 的解決方案,如高密度視頻結(jié)構(gòu)化分析解決方案、高并發(fā)智能轉(zhuǎn)碼解決方案、光電混合異構(gòu)計算解決方案等,這些方案可廣泛應(yīng)用于城市安防、智慧交通、工業(yè)視覺、短視頻、云計算和智算中心等多個領(lǐng)域。
再如天數(shù)智芯,其提供的算力集群具有支持百億級參數(shù)大模型訓(xùn)練的能力。早前有消息,天數(shù)智芯與智源研究院、愛特云翔合作,開展基于自主通用GPU的大模型CodeGen(高效編碼)項目,通過中文描述來生成可用的C、Java、Python代碼以實現(xiàn)高效編碼。
智源研究院負(fù)責(zé)算法設(shè)計、訓(xùn)練框架開發(fā)、大模型的訓(xùn)練與調(diào)優(yōu),天數(shù)智芯負(fù)責(zé)提供天垓100加速卡、構(gòu)建算力集群及全程技術(shù)支持,愛特云翔負(fù)責(zé)提供算存網(wǎng)基礎(chǔ)硬件及智能化運維服務(wù)。在天垓100加速卡的算力集群,基于智源研究院70億參數(shù)的Aquila語言基礎(chǔ)模型,使用代碼數(shù)據(jù)進行繼續(xù)訓(xùn)練,穩(wěn)定運行19天,模型收斂效果符合預(yù)期。
近一年多來,隨著大模型的發(fā)展,國產(chǎn)GPU公司都在朝著大模型領(lǐng)域布局。摩爾線程此前也透露,公司已經(jīng)可以支持3億參數(shù)量模型的訓(xùn)練,2022年底就提前布局了自然語言模型預(yù)訓(xùn)練,自研了MusaBert模型。
還有登臨科技,該公司此前也表示,公司首款產(chǎn)品Goldwasser已規(guī)?;\用在多家行業(yè)知名企業(yè)的主營業(yè)務(wù)中,新一代Goldwasser產(chǎn)品針對基于Transformer的網(wǎng)絡(luò)和生成式AI類大模型的應(yīng)用在性能有大幅提升。
國產(chǎn)GPU應(yīng)用于AI領(lǐng)域的多個方面
除了上述談到應(yīng)用案例,國產(chǎn)GPU在AI領(lǐng)域的應(yīng)用案例還有很多,主要涉及到深度學(xué)習(xí)、自然語言處理以及計算機視覺等多個方面。
如,在計算機視覺領(lǐng)域,國產(chǎn)GPU被廣泛應(yīng)用于圖像識別和目標(biāo)檢測等任務(wù)。例如,利用GPU加速的深度學(xué)習(xí)模型可以大幅提升算法的準(zhǔn)確性和實時性,這在安防監(jiān)控、自動駕駛等實際應(yīng)用中具有重要的價值。
在自然語言處理方面,國產(chǎn)GPU也在發(fā)揮重要作用。通過GPU加速的循環(huán)神經(jīng)網(wǎng)絡(luò)、Transformer等模型,可以實現(xiàn)高效的機器翻譯、文本生成等任務(wù)。這對于提升智能客服、智能寫作等應(yīng)用的性能具有關(guān)鍵作用。
國產(chǎn)GPU還在強化學(xué)習(xí)領(lǐng)域得到了應(yīng)用。強化學(xué)習(xí)是AI領(lǐng)域的一個重要分支,其目標(biāo)是通過與環(huán)境的交互來學(xué)習(xí)策略。GPU加速的價值網(wǎng)絡(luò)、策略網(wǎng)絡(luò)等模型可以應(yīng)用于游戲AI、機器人控制等領(lǐng)域,從而提高智能體的學(xué)習(xí)效率和性能。
另外值得關(guān)注的還有,國產(chǎn)GPU在自動駕駛領(lǐng)域的應(yīng)用也比較多。自動駕駛系統(tǒng)需要處理大量的傳感器數(shù)據(jù),包括來自攝像頭、雷達(dá)、激光雷達(dá)等的信息。GPU通過其強大的并行計算能力和高效的內(nèi)存管理,可以實時處理這些數(shù)據(jù),并為自動駕駛系統(tǒng)提供準(zhǔn)確的決策依據(jù)。
例如,一些國產(chǎn)汽車廠商已經(jīng)開始在其自動駕駛系統(tǒng)中采用國產(chǎn)GPU。這些GPU不僅用于圖像處理和計算機視覺任務(wù),如目標(biāo)檢測、車道線識別等,還用于深度學(xué)習(xí)模型的推理和決策。通過GPU的加速,自動駕駛系統(tǒng)可以更快地識別交通信號、障礙物以及其他重要信息,從而提高行車安全性。
此外,國產(chǎn)GPU還在自動駕駛的地圖構(gòu)建和定位方面發(fā)揮了重要作用。通過利用GPU進行高效的地圖數(shù)據(jù)處理和實時定位計算,自動駕駛系統(tǒng)可以更加準(zhǔn)確地感知周圍環(huán)境,并實現(xiàn)精確的導(dǎo)航和路徑規(guī)劃。
具體來說,百度Apollo、小馬智行等自動駕駛技術(shù)公司,都在其自動駕駛解決方案中采用了國產(chǎn)GPU。這些解決方案不僅應(yīng)用于乘用車,還擴展到商用車、物流車等多個領(lǐng)域。
寫在最后
從目前的情況來看,國內(nèi)外GPU廠商都在追逐大模型應(yīng)用帶來的機會。當(dāng)前無論是大模型訓(xùn)練還是推理,英偉達(dá)GPU都占據(jù)了絕大部分市場。對于國產(chǎn)廠商來說,為了在大模型方面擁有更多自主權(quán),仍然需要持續(xù)在大模型訓(xùn)練方面發(fā)力,同時相對大模型訓(xùn)練來說,大模型接下來大面積的部署,對于推理芯片的需要將會很大,這將是一個更容易把握的機會。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。
舉報投訴
-
gpu
+關(guān)注
關(guān)注
28文章
4673瀏覽量
128592 -
AI
+關(guān)注
關(guān)注
87文章
29806瀏覽量
268103 -
大模型
+關(guān)注
關(guān)注
2文章
2274瀏覽量
2356 -
AI大模型
+關(guān)注
關(guān)注
0文章
307瀏覽量
276
發(fā)布評論請先 登錄
相關(guān)推薦
CPU\GPU引領(lǐng),國產(chǎn)AI PC進階
電子發(fā)燒友網(wǎng)報道(文/黃晶晶)當(dāng)前AI PC已經(jīng)成為PC產(chǎn)業(yè)的下一個浪潮,國產(chǎn)CPU、GPU廠商在PC市場
AI大模型不再依賴英偉達(dá)GPU?蘋果揭秘自研大模型
,獲得足夠的算力構(gòu)建自己的計算中心,用于訓(xùn)練不同應(yīng)用的AI模型。 AI領(lǐng)域眾星捧月也造就了英偉達(dá)市值曾突破三萬億美元,并短暫登頂全球第一的位
為什么ai模型訓(xùn)練要用gpu
GPU憑借其強大的并行處理能力和高效的內(nèi)存系統(tǒng),已成為AI模型訓(xùn)練不可或缺的重要工具。
不同領(lǐng)域中AI大模型的應(yīng)用實例
AI大模型在不同領(lǐng)域有著廣泛的應(yīng)用實例,以下是一些具體領(lǐng)域的應(yīng)用案例:
【「大模型時代的基礎(chǔ)架構(gòu)」閱讀體驗】+ 未知領(lǐng)域的感受
”,好奇于這種大模型算力中心到底是如何建設(shè)的,用什么設(shè)備、什么架構(gòu)建設(shè)的?對這些問題真是一無所知,甚至都沒有想過,帶著這份好奇開始閱讀。
先瀏覽目錄,共分十三章,目錄中出現(xiàn)最多的就是GPU,比如機器學(xué)習(xí)
發(fā)表于 10-08 10:40
人工智能ai4s試讀申請
目前人工智能在繪畫對話等大模型領(lǐng)域應(yīng)用廣闊,ai4s也是方興未艾。但是如何有效利用ai4s工具助力科研是個需要研究的課題,本書對ai4s基本原理和原則,方法進行描訴,有利于總結(jié)經(jīng)驗,擬
發(fā)表于 09-09 15:36
大模型發(fā)展下,國產(chǎn)GPU的機會和挑戰(zhàn)
電子發(fā)燒友網(wǎng)站提供《大模型發(fā)展下,國產(chǎn)GPU的機會和挑戰(zhàn).pdf》資料免費下載
發(fā)表于 07-18 15:44
?6次下載
摩爾線程與智譜AI完成大模型性能測試與適配
近日,摩爾線程與智譜AI在人工智能領(lǐng)域開展了一輪深入的合作,共同對GPU大模型進行了適配及性能測
摩爾線程與無問芯穹在國產(chǎn)GPU上首次實現(xiàn)大模型實訓(xùn)
近日,摩爾線程與無問芯穹共同宣布,雙方已正式完成基于國產(chǎn)全功能GPU千卡集群的3B規(guī)模大模型實訓(xùn)。這款名為“MT-infini-3B”的模型,在
智譜AI正研發(fā)對標(biāo)Sora的國產(chǎn)文生視頻模型
智譜AI,這家國內(nèi)估值超過200億的AI大模型獨角獸企業(yè),正全力投入研發(fā)一款與OpenAI的Sora相媲美的國產(chǎn)文生視頻
盤點國產(chǎn)GPU在支持大模型應(yīng)用方面的進展
,近些年國內(nèi)也有不少GPU企業(yè)在逐步成長,雖然在大模型的訓(xùn)練和推理方面,與英偉達(dá)GPU差距極大,但是不可忽視的是,不少
FPGA在深度學(xué)習(xí)應(yīng)用中或?qū)⑷〈?b class='flag-5'>GPU
上漲,因為事實表明,它們的 GPU 在訓(xùn)練和運行 深度學(xué)習(xí)模型 方面效果明顯。實際上,英偉達(dá)也已經(jīng)對自己的業(yè)務(wù)進行了轉(zhuǎn)型,之前它是一家純粹做 GPU
發(fā)表于 03-21 15:19
谷歌發(fā)布基礎(chǔ)世界模型Genie,世界模型領(lǐng)域競爭升溫
繼OpenAI和Meta之后,谷歌也在世界模型領(lǐng)域公布了其最新進展。據(jù)谷歌官網(wǎng)介紹,Genie是一個基于互聯(lián)網(wǎng)視頻訓(xùn)練的基礎(chǔ)世界模型,能夠從合成圖像、照片、草圖等多種來源生成多種動作可控的環(huán)境。
評論