0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

摩爾線程與智譜AI完成大模型性能測試與適配

CHANBAEK ? 來源:網(wǎng)絡(luò)整理 ? 2024-06-14 16:40 ? 次閱讀

近日,摩爾線程與智譜AI人工智能領(lǐng)域開展了一輪深入的合作,共同對GPU大模型進(jìn)行了適配及性能測試。此次測試不僅涵蓋了大模型的推理能力,還涉及了基于摩爾線程夸娥(KUAE)千卡智算集群的大模型預(yù)訓(xùn)練,旨在全面評估摩爾線程GPU在大模型應(yīng)用中的性能表現(xiàn)。

在推理性能測試中,摩爾線程自研的全功能GPU展現(xiàn)出了卓越的性能。與基準(zhǔn)對比產(chǎn)品RTX 3090和RTX 4090相比,摩爾線程的GPU在全部測試用例中均優(yōu)于RTX 3090,而在多batch情況下更是超越了RTX 4090。這一結(jié)果充分證明了摩爾線程GPU在推理能力上的出色表現(xiàn),為用戶提供了更加高效、準(zhǔn)確的計(jì)算體驗(yàn)。

在訓(xùn)練性能測試中,摩爾線程夸娥千卡智算集群同樣展現(xiàn)出了強(qiáng)大的性能。測試結(jié)果顯示,夸娥千卡智算集群的訓(xùn)練精度與A100集群誤差在1%以內(nèi),這一數(shù)據(jù)足以證明其在訓(xùn)練過程中的精確度和穩(wěn)定性。同時(shí),夸娥千卡智算集群的性能擴(kuò)展系數(shù)超過90%,意味著在分布式計(jì)算環(huán)境下,該集群能夠充分利用各節(jié)點(diǎn)的計(jì)算能力,實(shí)現(xiàn)高效的并行計(jì)算。此外,模型算力利用率(MFU)與A100集群相當(dāng),進(jìn)一步證明了夸娥千卡智算集群在大模型訓(xùn)練中的高效性。

此次測試的成功不僅為摩爾線程和智譜AI的合作奠定了堅(jiān)實(shí)的基礎(chǔ),也為雙方在人工智能領(lǐng)域的深入探索提供了有力的技術(shù)支撐。未來,雙方將繼續(xù)攜手合作,共同推動(dòng)GPU大模型在更多領(lǐng)域的應(yīng)用和發(fā)展。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    28860

    瀏覽量

    266176
  • 人工智能
    +關(guān)注

    關(guān)注

    1787

    文章

    46047

    瀏覽量

    234940
  • 摩爾線程
    +關(guān)注

    關(guān)注

    1

    文章

    187

    瀏覽量

    4359
收藏 人收藏

    評論

    相關(guān)推薦

    摩爾線程與羽人科技完成大語言模型訓(xùn)練測試

    近日,摩爾線程與羽人科技攜手宣布,雙方已成功實(shí)現(xiàn)夸娥(KUAE)千卡智算集群與羽人系列模型解決方案的訓(xùn)練兼容適配。在本次測試中,羽人科技通過
    的頭像 發(fā)表于 08-27 16:19 ?392次閱讀

    摩爾線程正式開源音頻理解大模型MooER

    近日,國內(nèi)領(lǐng)先的GPU創(chuàng)新企業(yè)摩爾線程宣布了一項(xiàng)重大技術(shù)突破——正式開源其自主研發(fā)的音頻理解大模型MooER(摩耳)。這一舉動(dòng)標(biāo)志著我國在音頻處理與理解領(lǐng)域邁出了堅(jiān)實(shí)的一步,特別是在基于國產(chǎn)硬件的
    的頭像 發(fā)表于 08-27 15:24 ?336次閱讀

    摩爾線程攜手智源研究院完成基于Triton的大模型算子庫適配

    近日,摩爾線程與北京智源人工智能研究院(簡稱:智源研究院)已順利完成基于Triton語言的高性能算子庫FlagGems的適配工作。得益于
    的頭像 發(fā)表于 08-02 11:06 ?531次閱讀

    摩爾線程攜手東華軟件完成AI模型推理測試適配

    近日,摩爾線程與東華軟件云筑AI創(chuàng)新中心宣布,雙方已完成大模型推理測試
    的頭像 發(fā)表于 07-31 10:51 ?478次閱讀

    摩爾線程和樂創(chuàng)能源簽署戰(zhàn)略合作協(xié)議

    近日,摩爾線程和樂創(chuàng)能源簽署了戰(zhàn)略合作協(xié)議,雙方將聚焦能源大模型的創(chuàng)新與應(yīng)用,圍繞新能源領(lǐng)域的電池、新能源發(fā)電、負(fù)荷管理、需求側(cè)響應(yīng)等產(chǎn)品技術(shù)方向,共同研發(fā)能源大模型。依托
    的頭像 發(fā)表于 07-11 14:35 ?537次閱讀

    摩爾線程與羽人科技攜手完成7B大模型訓(xùn)練測試

    近日,摩爾線程與羽人科技聯(lián)合宣布了一項(xiàng)重要成果:雙方已成功實(shí)現(xiàn)夸娥(KUAE)千卡智算集群與羽人系列模型解決方案的訓(xùn)練兼容適配。這一成果不僅標(biāo)志著兩大技術(shù)巨頭在人工智能領(lǐng)域的深度合作取
    的頭像 發(fā)表于 06-14 16:33 ?379次閱讀

    摩爾線程與師者AI攜手完成70億參數(shù)教育AI模型訓(xùn)練測試

    近日,國內(nèi)知名的GPU制造商摩爾線程與全學(xué)科教育AI模型“師者AI”聯(lián)合宣布,雙方已成功完成
    的頭像 發(fā)表于 06-14 16:31 ?443次閱讀

    摩爾線程和滴普科技完成大模型訓(xùn)練與推理適配

    近日,摩爾線程與滴普科技宣布了一項(xiàng)重要合作成果。摩爾線程的夸娥(KUAE)千卡智算集群與滴普科技的企業(yè)大模型Deepexi已
    的頭像 發(fā)表于 05-30 10:14 ?412次閱讀

    摩爾線程千卡智算集群與滴普企業(yè)大模型完成訓(xùn)練及推理適配

    近日,摩爾線程與國內(nèi)領(lǐng)先的數(shù)據(jù)智能服務(wù)商滴普科技共同宣布,摩爾線程夸娥(KUAE)千卡智算集群與滴普企業(yè)大模型Deepexi已
    的頭像 發(fā)表于 05-29 10:28 ?345次閱讀
    <b class='flag-5'>摩爾</b><b class='flag-5'>線程</b>千卡智算集群與滴普企業(yè)大<b class='flag-5'>模型</b>已<b class='flag-5'>完成</b>訓(xùn)練及推理<b class='flag-5'>適配</b>

    摩爾線程與無問芯穹在國產(chǎn)GPU上首次實(shí)現(xiàn)大模型實(shí)訓(xùn)

    近日,摩爾線程與無問芯穹共同宣布,雙方已正式完成基于國產(chǎn)全功能GPU千卡集群的3B規(guī)模大模型實(shí)訓(xùn)。這款名為“MT-infini-3B”的模型
    的頭像 發(fā)表于 05-27 10:59 ?546次閱讀

    摩爾線程與無問芯穹宣布完成基于GPU千卡集群的3B規(guī)模大模型實(shí)訓(xùn)

    摩爾線程聯(lián)合無問芯穹宣布,雙方已在本周正式完成基于國產(chǎn)全功能GPU千卡集群的3B規(guī)模大模型實(shí)訓(xùn)。
    的頭像 發(fā)表于 05-27 10:44 ?375次閱讀
    <b class='flag-5'>摩爾</b><b class='flag-5'>線程</b>與無問芯穹宣布<b class='flag-5'>完成</b>基于GPU千卡集群的3B規(guī)模大<b class='flag-5'>模型</b>實(shí)訓(xùn)

    摩爾線程與Reportify聯(lián)手加速金融大模型創(chuàng)新應(yīng)用

    近日,國內(nèi)創(chuàng)新的AI投資研究問答搜索引擎Reportify成功集成了摩爾線程自研大語言模型MUSAChat的推理API云服務(wù),并已正式上線,運(yùn)行效果良好。
    的頭像 發(fā)表于 05-22 18:14 ?1188次閱讀

    摩爾線程攜手憨猴集團(tuán),深化AI算力戰(zhàn)略合作,成功實(shí)現(xiàn)大模型分布式訓(xùn)練

    摩爾線程與憨猴科技集團(tuán)日前宣布,采用搭載摩爾線程的夸娥(KUAE)千卡智算集群,已成功完成了多個(gè)大模型
    的頭像 發(fā)表于 05-17 17:24 ?552次閱讀

    摩爾線程攜手憨猴集團(tuán),共同探索國產(chǎn)AI算力的新應(yīng)用場景與落地實(shí)踐

    摩爾線程與憨猴科技集團(tuán)有限公司(簡稱:憨猴集團(tuán))近日宣布,基于摩爾線程的夸娥(KUAE)千卡智算集群,憨猴集團(tuán)已成功完成了7B、34B、70
    的頭像 發(fā)表于 05-17 15:08 ?358次閱讀

    摩爾線程助力AI模型訓(xùn)練與計(jì)算升級,共建美好數(shù)字化未來

    此外,在中關(guān)村國際技術(shù)交易大會(huì)高精尖技術(shù)產(chǎn)品首發(fā)會(huì)上,摩爾線程與無問芯穹聯(lián)合宣布,雙方正致力于開發(fā)基于夸娥千卡智算集群的“MT-infini-3B”合作大模型。摩爾
    的頭像 發(fā)表于 04-28 16:42 ?818次閱讀