浪潮信息近日發(fā)布了一款全新的開源大模型——“源2.0-M32”。這款大模型在“源2.0”系列大模型的基礎(chǔ)上,進(jìn)行了深度的技術(shù)創(chuàng)新與升級。
其核心技術(shù)亮點在于“基于注意力機(jī)制的門控網(wǎng)絡(luò)”技術(shù)的引入。通過這一技術(shù),浪潮信息成功構(gòu)建了一個包含32個專家的混合專家模型(MoE),該模型不僅結(jié)構(gòu)先進(jìn),而且算力效率極高。在運行時,模型的激活參數(shù)僅為37億,這一數(shù)字在業(yè)界中堪稱領(lǐng)先。
更為值得一提的是,“源2.0-M32”在性能上全面對標(biāo)了擁有700億參數(shù)的LLaMA3開源大模型。在業(yè)界主流基準(zhǔn)評測中,它展現(xiàn)出了卓越的性能,為用戶提供了更為高效、精準(zhǔn)的服務(wù)。
此次“源2.0-M32”的發(fā)布,無疑將進(jìn)一步推動人工智能領(lǐng)域的發(fā)展,同時也彰顯了浪潮信息在技術(shù)創(chuàng)新方面的領(lǐng)先地位。
聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。
舉報投訴
相關(guān)推薦
近日,2024金融科技應(yīng)用創(chuàng)新發(fā)展大會暨農(nóng)村金融機(jī)構(gòu)信息化發(fā)展創(chuàng)新座談會在上海舉辦。浪潮信息推出元腦企智EPAI企業(yè)大模型開發(fā)平臺,面向金融業(yè)務(wù)場景,實現(xiàn)7天完成POC驗證、2個月上線AI應(yīng)用,通過
發(fā)表于 09-20 16:07
?26次閱讀
北京2024年8月23日?/美通社/ -- 近日,浪潮信息發(fā)布源2.0-M32大模型4bit和8bit量化版,性能比肩700億參數(shù)的LLaM
發(fā)表于 08-25 22:06
?150次閱讀
近日,在科技創(chuàng)新的浪潮中,浪潮信息成功舉辦了“元腦中國行”全國巡展的杭州站活動,此次盛會不僅匯聚了業(yè)界的精英與目光,更見證了浪潮信息在AIGC(人工智能生成內(nèi)容)領(lǐng)域的一次重大突破。會上,浪潮
發(fā)表于 07-03 11:16
?531次閱讀
北京2024年6月5日?/美通社/ -- 近日,畢昇大模型應(yīng)用開發(fā)平臺與浪潮信息AIStation智能業(yè)務(wù)生產(chǎn)創(chuàng)新平臺完成兼容性互認(rèn)證。基于畢昇和浪潮信息AIStation,用戶通過預(yù)置的畢昇助手
發(fā)表于 06-05 11:58
?301次閱讀
5月28日,浪潮信息發(fā)布“源2.0-M32”開源大模型?!?b class='flag-5'>源
發(fā)表于 05-29 09:34
?316次閱讀
浪潮信息近日推出了革命性的“源2.0-M32”開源大模型。該模型在
發(fā)表于 05-29 09:08
?520次閱讀
浪潮信息近日推出了專為大型AI模型優(yōu)化的AS13000G7-N系列分布式全閃存儲。該系列基于浪潮信息自研的分布式文件系統(tǒng),結(jié)合新一代數(shù)據(jù)加速引擎DataTurbo,為用戶提供卓越的存儲解決方案。
發(fā)表于 05-14 10:03
?408次閱讀
5月8日,RISC-V國際人才培養(yǎng)認(rèn)證中心主任蔣學(xué)剛一行,到訪浪潮電子信息產(chǎn)業(yè)股份有限公司(以下簡稱“浪潮信息”),受到深圳區(qū)域副總經(jīng)理段青云、產(chǎn)品經(jīng)理陶耀民的熱情接待。浪潮信息是全球
發(fā)表于 05-13 17:42
?247次閱讀
北京2024年5月10日?/美通社/ -- 近日,浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲AS13000G7-N系列。該系列依托浪潮信息自研分布式文件系統(tǒng),搭載新一代數(shù)據(jù)加速引擎
發(fā)表于 05-10 16:37
?337次閱讀
近日,浪潮信息發(fā)布為大模型專門優(yōu)化的分布式全閃存儲AS13000G7-N系列。該系列依托浪潮信息自研分布式文件系統(tǒng),搭載新一代數(shù)據(jù)加速引擎DataTurbo,
發(fā)表于 05-08 09:38
?379次閱讀
北京2024年4月18日?/美通社/ -- 4月17日,在2024浪潮信息生態(tài)伙伴大會(IPF2024)上,浪潮信息發(fā)布企業(yè)大模型開發(fā)平臺"元腦企智"EPAI(Enterprise P
發(fā)表于 04-18 21:21
?346次閱讀
4月17日,在2024浪潮信息生態(tài)伙伴大會(IPF2024)上,浪潮信息重磅發(fā)布企業(yè)大模型開發(fā)平臺“元腦企智”EPAI(Enterprise
發(fā)表于 04-18 10:12
?284次閱讀
北京2024年3月27日 /美通社/ -- 3月26日, 浪潮信息與英特爾正式宣布,浪潮信息"源2.0系列基礎(chǔ)大模型"已和最新的英特爾? 酷
發(fā)表于 03-27 22:52
?373次閱讀
3月26日,浪潮信息與英特爾正式宣布,浪潮信息“源2.0系列基礎(chǔ)大模型”已和最新的英特爾? 酷睿? Ultra處理器平臺完成適配,本地推理速
發(fā)表于 03-27 13:50
?468次閱讀
11月27日,浪潮信息發(fā)布"源2.0"基礎(chǔ)大模型,并宣布全面開源。
發(fā)表于 11-28 09:10
?700次閱讀
評論