0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線(xiàn)課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

墨芯完成智譜大模型適配黃金認(rèn)證助推國(guó)產(chǎn)算力商業(yè)化進(jìn)程

墨芯人工智能 ? 來(lái)源:墨芯人工智能 ? 2023-11-27 09:16 ? 次閱讀

在推動(dòng)大模型算力量級(jí)提升的道路上,稀疏計(jì)算引領(lǐng)者墨芯人工智能(以下簡(jiǎn)稱(chēng)“墨芯”)再次邁出重要的一步。

近日,墨芯旗下產(chǎn)品S30計(jì)算卡經(jīng)過(guò)智譜AI內(nèi)部專(zhuān)家的嚴(yán)格測(cè)評(píng),榮獲黃金級(jí)別認(rèn)證,充分顯示了其與智譜AI(以下簡(jiǎn)稱(chēng)“智譜”)的ChatGLM2-6B開(kāi)源大模型在推理與微調(diào)方面的高度兼容性和卓越適配能力。

df8c5f74-8cc0-11ee-939d-92fbcf53809c.jpg

墨芯獲得智譜ChatGLM2-6B模型黃金認(rèn)證證書(shū)

除了上述已經(jīng)成功適配的ChatGLM2-6B大模型外,墨芯正通過(guò)基于S30計(jì)算卡的定制化算力為智譜提供一體化解決方案,同時(shí)也積極參與到智譜其他閉源商業(yè)大模型的兼容性適配中,這一過(guò)程也加速了智譜AI大模型的商用步伐。

墨芯的助力,不僅是對(duì)智譜現(xiàn)有AI產(chǎn)品矩陣的算力加持,更是對(duì)其未來(lái)AI技術(shù)應(yīng)用領(lǐng)域落地的一次積極探索。通過(guò)這種合作,墨芯和智譜AI共同推動(dòng)了國(guó)產(chǎn)大模型技術(shù)的商業(yè)化進(jìn)程,加快了其在多個(gè)行業(yè)中的實(shí)際應(yīng)用和普及。墨芯的S30計(jì)算卡作為這一合作的關(guān)鍵組成部分,其強(qiáng)大的算力和高效的適配能力不僅提升了智譜AI大模型的開(kāi)發(fā)和部署,也為之后在更多領(lǐng)域的合作提供了堅(jiān)實(shí)的基礎(chǔ),進(jìn)一步推動(dòng)了國(guó)產(chǎn)大模型的廣闊應(yīng)用和行業(yè)滲透。

此外,S30計(jì)算卡在技術(shù)創(chuàng)新上的突破,特別是在稀疏計(jì)算和AI算法優(yōu)化方面的先進(jìn)性,為智譜的AI大模型提供了強(qiáng)大的后端支撐。這不僅加強(qiáng)了智譜大模型的性能和適用性,而且在促進(jìn)國(guó)產(chǎn)AI技術(shù)的商業(yè)化和產(chǎn)業(yè)化方面發(fā)揮了重要作用。通過(guò)這種強(qiáng)強(qiáng)聯(lián)手模式,墨芯和智譜共同展現(xiàn)了國(guó)內(nèi)AI技術(shù)在未來(lái)無(wú)限的競(jìng)爭(zhēng)力和創(chuàng)新潛力。

通過(guò)本次認(rèn)證的S30計(jì)算卡搭載墨芯首顆Antoum芯片,以其高達(dá)32倍稀疏率的強(qiáng)勁AI算力,專(zhuān)注服務(wù)與數(shù)據(jù)中心AI推理的多元需求。其應(yīng)用領(lǐng)域覆蓋了互聯(lián)網(wǎng)、通信、智慧城市建設(shè)、生命科學(xué)、自動(dòng)駕駛等關(guān)鍵行業(yè),體現(xiàn)了其廣泛的適用性和靈活性。

墨芯的雙稀疏算法和Antoum架構(gòu)的創(chuàng)新,使S30在同行業(yè)產(chǎn)品中處于領(lǐng)先地位,更顯著優(yōu)化了客戶(hù)的總擁有成本(TCO)。

S30計(jì)算卡在行業(yè)內(nèi)以其卓越的推理加速性能始終保持領(lǐng)先。此前,在9月舉辦的最新一屆的全球權(quán)威測(cè)評(píng)MLPerf Inference 3.1推理評(píng)測(cè)中,墨芯S30計(jì)算卡,以其無(wú)與倫比的性能,在處理GPT-J(60億參數(shù))大模型推理任務(wù)時(shí),無(wú)論是單卡還是多卡配置,均力壓群雄,榮登榜首。這是墨芯連續(xù)第三次在MLPerf推理評(píng)測(cè)中取得領(lǐng)先成績(jī),進(jìn)一步夯實(shí)其在AI算力領(lǐng)域的領(lǐng)導(dǎo)地位。

dfb48972-8cc0-11ee-939d-92fbcf53809c.png

墨芯S30計(jì)算卡在GPT-J-99模型中的性能表現(xiàn)

ChatGLM2-6B模型由智譜AI與清華大學(xué)KEG實(shí)驗(yàn)室共同研發(fā),是一款功能強(qiáng)大的開(kāi)源中英雙語(yǔ)對(duì)話(huà)模型。其在沿襲了初代模型的流暢對(duì)話(huà)和低部署難度的基礎(chǔ)上,進(jìn)一步提升了推理速度和降低顯存占用,整體性能更加出色。

S30計(jì)算卡的黃金認(rèn)證,不僅是其技術(shù)實(shí)力的顯著證明,更是墨芯賦能智譜大模型商業(yè)化進(jìn)程的關(guān)鍵一環(huán),不僅證實(shí)了S30計(jì)算卡在運(yùn)行智譜ChatGLM2-6B大模型時(shí)的穩(wěn)定性和高吞吐能力,也標(biāo)志著墨芯與智譜在共同推進(jìn)大模型技術(shù)發(fā)展和生態(tài)建設(shè)方面的成功合作。未來(lái),墨芯人工智能將與智譜AI在更多領(lǐng)域展開(kāi)廣闊合作,共同致力于推動(dòng)國(guó)產(chǎn)AI大模型生態(tài)圈的協(xié)同進(jìn)步與創(chuàng)新。

關(guān)于

智譜AI

ABOUT ZHIPU AI

北京智譜華章科技有限公司(簡(jiǎn)稱(chēng)“智譜AI”)致力于打造新一代認(rèn)知智能大模型,專(zhuān)注于做大模型的中國(guó)創(chuàng)新。公司合作研發(fā)了中英雙語(yǔ)千億級(jí)超大規(guī)模預(yù)訓(xùn)練模型GLM-130B,并基于此推出對(duì)話(huà)模型ChatGLM,開(kāi)源單卡版模型ChatGLM-6B。同時(shí),團(tuán)隊(duì)還打造了AIGC模型及產(chǎn)品矩陣,包括AI提效助手智譜清言、高效率代碼模型CodeGeeX、多模態(tài)理解模型CogVLM和文生圖模型CogView等。公司踐行Model as a Service(MaaS)的市場(chǎng)理念,推出大模型MaaS開(kāi)放平臺(tái),打造高效率、通用化的“模型即服務(wù)”AI開(kāi)發(fā)新范式。

關(guān)于墨芯

人工智能

ABOUT MOFFETT AI

墨芯人工智能是稀疏計(jì)算引領(lǐng)者,致力于提供云端和終端AI計(jì)算平臺(tái)和服務(wù)。通過(guò)全球領(lǐng)先的稀疏計(jì)算技術(shù)優(yōu)勢(shì),打造軟硬協(xié)同的新一代智能計(jì)算平臺(tái)。產(chǎn)品性能位居行業(yè)領(lǐng)先,相較行業(yè)主流產(chǎn)品,在算力、能效比與成本等方面均實(shí)現(xiàn)數(shù)量級(jí)優(yōu)化。面向互聯(lián)網(wǎng)、運(yùn)營(yíng)商、金融、制造、醫(yī)療、交通、能源、生命科學(xué)、自動(dòng)駕駛等眾多行業(yè)與場(chǎng)景,提供高算力、低功耗、高性?xún)r(jià)比的AI算力服務(wù),賦能前沿科技的進(jìn)步與社會(huì)的智能化升級(jí)。






審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 人工智能
    +關(guān)注

    關(guān)注

    1787

    文章

    46061

    瀏覽量

    235007
  • ai技術(shù)
    +關(guān)注

    關(guān)注

    1

    文章

    1243

    瀏覽量

    24003

原文標(biāo)題:墨芯完成智譜大模型適配黃金認(rèn)證,助推國(guó)產(chǎn)算力商業(yè)化進(jìn)程

文章出處:【微信號(hào):墨芯人工智能,微信公眾號(hào):墨芯人工智能】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    芯片、模型生態(tài)分散,無(wú)問(wèn)穹、沐曦、壁仞談國(guó)產(chǎn)瓶頸破局之道

    ? 電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)近日,2024世界人工智能大會(huì)正在舉行,無(wú)問(wèn)穹聯(lián)合創(chuàng)始人兼CEO夏立雪在大會(huì)論壇上談到一個(gè)現(xiàn)象,從GPT-3到GPT-4,無(wú)論是還是大模型能力都
    的頭像 發(fā)表于 07-07 11:14 ?4134次閱讀
    芯片、<b class='flag-5'>模型</b>生態(tài)分散,無(wú)問(wèn)<b class='flag-5'>芯</b>穹、沐曦、壁仞談<b class='flag-5'>國(guó)產(chǎn)</b><b class='flag-5'>算</b><b class='flag-5'>力</b>瓶頸破局之道

    模型時(shí)代的需求

    現(xiàn)在AI已進(jìn)入大模型時(shí)代,各企業(yè)都爭(zhēng)相部署大模型,但如何保證大模型,以及相關(guān)的穩(wěn)定性和性能,是一個(gè)極為重要的問(wèn)題,帶著這個(gè)極為重要的問(wèn)
    發(fā)表于 08-20 09:04

    小鵬匯天獲1.5億美元B1輪融資,加速飛行汽車(chē)商業(yè)化進(jìn)程

    小鵬匯天近日宣布成功完成1.5億美元的B1輪融資,并同步啟動(dòng)B2輪融資計(jì)劃,標(biāo)志著公司在飛行汽車(chē)領(lǐng)域的研發(fā)與商業(yè)化進(jìn)程邁入新階段。此次融資不僅為小鵬匯天提供了堅(jiān)實(shí)的資金保障,更將助力其加速推進(jìn)飛行汽車(chē)的研發(fā)、規(guī)模量產(chǎn)及市場(chǎng)布局。
    的頭像 發(fā)表于 08-06 10:59 ?724次閱讀

    摩爾線(xiàn)程攜手東華軟件完成AI大模型推理測(cè)試與適配

    近日,摩爾線(xiàn)程與東華軟件云筑AI創(chuàng)新中心宣布,雙方已完成模型推理測(cè)試與適配。依托摩爾線(xiàn)程的全功能GPU國(guó)產(chǎn)
    的頭像 發(fā)表于 07-31 10:51 ?478次閱讀

    蘿卜快跑爆火的背后,美格智能如何助力無(wú)人車(chē)商業(yè)化?

    無(wú)人車(chē)商業(yè)化進(jìn)程已經(jīng)邁入加速賽,美格智能將繼續(xù)堅(jiān)持研發(fā)投入,與產(chǎn)業(yè)伙伴共同構(gòu)建面向智能汽車(chē)產(chǎn)業(yè)的新質(zhì)生產(chǎn),助力無(wú)人車(chē)商業(yè)化加速發(fā)展!
    的頭像 發(fā)表于 07-16 16:39 ?366次閱讀

    蘿卜快跑爆火的背后,美格智能如何助力無(wú)人車(chē)商業(yè)化?

    無(wú)人車(chē)商業(yè)化進(jìn)程已經(jīng)邁入加速賽,美格智能將繼續(xù)堅(jiān)持研發(fā)投入,與產(chǎn)業(yè)伙伴共同構(gòu)建面向智能汽車(chē)產(chǎn)業(yè)的新質(zhì)生產(chǎn),助力無(wú)人車(chē)商業(yè)化加速發(fā)展!
    的頭像 發(fā)表于 07-16 16:37 ?1164次閱讀
    蘿卜快跑爆火的背后,美格智能如何助力無(wú)人車(chē)<b class='flag-5'>商業(yè)化</b>?

    摩爾線(xiàn)程與智AI完成模型性能測(cè)試與適配

    近日,摩爾線(xiàn)程與智AI在人工智能領(lǐng)域開(kāi)展了一輪深入的合作,共同對(duì)GPU大模型進(jìn)行了適配及性能測(cè)試。此次測(cè)試不僅涵蓋了大模型的推理能力,還涉及了基于摩爾線(xiàn)程夸娥(KUAE)千卡智
    的頭像 發(fā)表于 06-14 16:40 ?779次閱讀

    摩爾線(xiàn)程千卡智集群與滴普企業(yè)大模型完成訓(xùn)練及推理適配

    近日,摩爾線(xiàn)程與國(guó)內(nèi)領(lǐng)先的數(shù)據(jù)智能服務(wù)商滴普科技共同宣布,摩爾線(xiàn)程夸娥(KUAE)千卡智集群與滴普企業(yè)大模型Deepexi已完成訓(xùn)練及推理適配。
    的頭像 發(fā)表于 05-29 10:28 ?346次閱讀
    摩爾線(xiàn)程千卡智<b class='flag-5'>算</b>集群與滴普企業(yè)大<b class='flag-5'>模型</b>已<b class='flag-5'>完成</b>訓(xùn)練及推理<b class='flag-5'>適配</b>

    人工智能榮獲“2024AI層創(chuàng)新企業(yè)獎(jiǎng)”

    近日,稀疏計(jì)算引領(lǐng)者人工智能宣布,公司榮獲由中國(guó)科技產(chǎn)業(yè)智庫(kù)「甲子光年」主辦的“甲子引力X:星辰100榜單”評(píng)選的“2024AI層創(chuàng)新企業(yè)獎(jiǎng)”。
    的頭像 發(fā)表于 05-17 09:06 ?330次閱讀
    <b class='flag-5'>墨</b><b class='flag-5'>芯</b>人工智能榮獲“2024AI<b class='flag-5'>算</b><b class='flag-5'>力</b>層創(chuàng)新企業(yè)獎(jiǎng)”

    連續(xù)完成兩輪數(shù)億元融資,獲螞蟻集團(tuán)等加持助推二代AI芯片

    人工智能科技(深圳)有限公司在近期連續(xù)完成了兩輪數(shù)億元的融資,這兩輪融資分別由不同的投資方領(lǐng)投,并獲得了包括螞蟻集團(tuán)在內(nèi)的多家機(jī)構(gòu)的加持,以助推其二代AI芯片的研發(fā)和市場(chǎng)拓展。
    的頭像 發(fā)表于 04-15 15:49 ?493次閱讀

    微軟攜手法國(guó)AI初創(chuàng)企業(yè)Mistral推動(dòng)AI模型商業(yè)化

    微軟近日與法國(guó)人工智能初創(chuàng)企業(yè)Mistral達(dá)成合作協(xié)議,旨在推動(dòng)AI模型商業(yè)化應(yīng)用。據(jù)悉,微軟將提供全方位支持,幫助這家成立僅10個(gè)月的公司將其先進(jìn)的AI模型推向市場(chǎng)。同時(shí),微軟還將持有Mistral的少量股份,但具體的財(cái)務(wù)
    的頭像 發(fā)表于 02-28 10:23 ?410次閱讀

    云途半導(dǎo)體完成大額融資,加速高端汽車(chē)芯片國(guó)產(chǎn)化進(jìn)程

    云途半導(dǎo)體自成立以來(lái),始終專(zhuān)注于高端汽車(chē)芯片的研發(fā),致力于推進(jìn)其國(guó)產(chǎn)商品質(zhì)汽車(chē)芯片實(shí)現(xiàn)商業(yè)化。迄今為止,云途半導(dǎo)體已經(jīng)完成六輪融資,獲得了小米產(chǎn)投、北汽產(chǎn)投等業(yè)界翹楚的支持,同時(shí)也贏得藍(lán)馳創(chuàng)投、臨
    的頭像 發(fā)表于 02-02 10:14 ?645次閱讀

    燧原科技與青云科技達(dá)成戰(zhàn)略合作,創(chuàng)新異構(gòu)調(diào)度

    ,AIGC內(nèi)容生成類(lèi)模型正在重構(gòu)互聯(lián)網(wǎng)商業(yè)模式,催生數(shù)字經(jīng)濟(jì)新突破。隨著計(jì)算任務(wù)的多樣和復(fù)雜,更為高效和靈活的異構(gòu)計(jì)算是未來(lái)的發(fā)展方向。燧原的“云燧智
    的頭像 發(fā)表于 12-11 12:20 ?499次閱讀

    天數(shù)智支持智源研究院首次完成模型異構(gòu)混合訓(xùn)練,突破異構(gòu)束縛

    基于英偉達(dá)混合資源及天數(shù)智混合資源完成訓(xùn)練的大模型, 也是智源研究院與天數(shù)智合作取得的最新成果,再次證明了天數(shù)智通用 GPU 產(chǎn)品支持
    的頭像 發(fā)表于 11-30 13:10 ?2678次閱讀
    天數(shù)智<b class='flag-5'>芯</b>支持智源研究院首次<b class='flag-5'>完成</b>大<b class='flag-5'>模型</b>異構(gòu)<b class='flag-5'>算</b><b class='flag-5'>力</b>混合訓(xùn)練,突破異構(gòu)<b class='flag-5'>算</b><b class='flag-5'>力</b>束縛

    PODsys:大模型AI平臺(tái)部署的開(kāi)源“神器”

    模型是通用人工智能的底座,但大模型訓(xùn)練對(duì)平臺(tái)的依賴(lài)非常大。大模型
    的頭像 發(fā)表于 11-08 09:17 ?705次閱讀
    PODsys:大<b class='flag-5'>模型</b>AI<b class='flag-5'>算</b><b class='flag-5'>力</b>平臺(tái)部署的開(kāi)源“神器”