0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

新一代AI基礎設施成為AI 2.0時代“新基建”

商湯科技SenseTime ? 來源:商湯科技SenseTime ? 2024-01-04 09:41 ? 次閱讀

2023年,大模型、生成式AI的發(fā)展帶動了人工智能領域的范式轉換,人工智能從傳統(tǒng)的“分類器”進化成“生成器”,催生了千行百業(yè)的規(guī)?;枨?。

那么怎樣的基礎設施,才能更好地支撐AI產業(yè)進入2.0時代?

近日,商湯科技智能產業(yè)研究院與中國信息通信研究院云計算與大數(shù)據研究所,中國智能算力產業(yè)聯(lián)盟,人工智能算力產業(yè)生態(tài)聯(lián)盟,聯(lián)合發(fā)布《新一代人工智能基礎設施白皮書》(以下簡稱《白皮書》)。

《白皮書》不僅明確了“新一代AI基礎設施”的定義、特點和價值,還首次提出“新一代AI基礎設施評估體系”,為AI 2.0時代智算產業(yè)發(fā)展提供重要參考。

新一代AI基礎設施

成為AI 2.0時代“新基建”

數(shù)據顯示,過去四年,大模型參數(shù)量以年均400%復合增長,AI算力需求增長超過15萬倍,遠超摩爾定律。

CPU中心的傳統(tǒng)計算基礎設施已無法滿足大模型、生成式AI的新要求。

大模型訓練對數(shù)據質量和效率的需求,企業(yè)應用生成式AI對于MaaS(大模型即服務)的需求,也都給AI基礎設施提出了全新要求。

而新一代AI基礎設施絕非傳統(tǒng)云的AI化,兩者具有明顯差別。傳統(tǒng)云計算基礎設施主要支持互聯(lián)網應用、SAAS等服務,而新一代AI基礎設施提供大模型訓練與推理、生成式AI部署、區(qū)域/行業(yè)創(chuàng)新孵化等服務。

何為新一代AI基礎設施?《白皮書》給出了明確定義:

以大模型能力輸出為核心平臺,集成算力資源、數(shù)據服務和云服務,專門設計用于最大限度提升大模型和生成式AI應用的表現(xiàn):數(shù)據準備與管理、大模型訓練、推理、模型能力調用、生成式AI應用部署。企業(yè)通過新一代AI基礎設施開發(fā)和運行生成式AI業(yè)務和客戶應用程序,以及基模型和行業(yè)模型的訓練與微調。 《白皮書》指出,新一代AI基礎設施的建設將降低大模型開發(fā)和應用門檻,在政企服務、產業(yè)和科研創(chuàng)新等方面創(chuàng)造更大社會價值。

面向產業(yè),將加快推進傳統(tǒng)產業(yè)上下游各個環(huán)節(jié)的智能化轉型,催生新業(yè)態(tài)、新模式的不斷涌現(xiàn)。

面向科研,可加速科學實驗的自動化和智能化,激發(fā)人工智能驅動科學研究(AI for Science)的新范式。

面向政務,將原本分散、碎片化的政務應用,通過“一模通辦” 為政務服務提質增效。

首次提出

新一代AI基礎設施評估體系

當前,新一代AI基礎設施市場處于高速競爭的初級階段,云計算、AI原生、硬件系統(tǒng)等各類廠商均有各自優(yōu)勢。

為了給企業(yè)用戶提供AI基礎設施選型的可靠性指導,《白皮書》首次提出了“新一代AI基礎設施評估體系”。

通過產品技術、戰(zhàn)略愿景、市場生態(tài)三大維度、十二個評估指標,對AI基礎設施廠商綜合能力進行定性和定量的全面評估。

《白皮書》選取了十二家最具代表性的AI基礎設施廠商。商湯科技的新一代AI基礎設施 -SenseCore商湯大裝置,在各個評估指標的得分均超過廠商平均分,并在市場響應、市場認知、產品戰(zhàn)略、工程化建設四個評估指標拿到滿分,成為新一代AI基礎設施市場的領導者。

1a9ed3d8-a6ea-11ee-8b88-92fbcf53809c.png

SenseCore商湯大裝置

在新一代AI基礎設施評估體系的評分

《白皮書》指出,商湯在產品服務能力呈現(xiàn)出較強的產品實力和技術積累,不僅超前布局了算力基礎設施,還在MaaS平臺以及自身大模型業(yè)務的加持下,形成了整套AI基礎設施產品架構,滿足客戶大模型訓練、生成式AI應用的大規(guī)模落地需求。

SenseCore商湯大裝置作為商湯推出的AI基礎設施產品與解決方案,總體算力規(guī)模目前已達6800P,在支持商湯自身大模型研發(fā)的同時,也支持外部客戶訓練大模型和應用部署。

今年以來,共有超1000個參數(shù)量數(shù)十億至上千億的大模型在大裝置上完成訓練,實現(xiàn)了領跑行業(yè)的技術迭代進度,并支持了數(shù)十款生成式AI應用。

1aae6fe6-a6ea-11ee-8b88-92fbcf53809c.png

激發(fā)“智能基建革新”

加速大模型和生成式AI落地

從大模型的訓練到生成式AI應用的部署,再到區(qū)域智算中心的建設與運營,《白皮書》列舉了商湯基于大裝置的多場景實踐案例,激發(fā)AI的商業(yè)創(chuàng)新價值。例如:

大模型訓練場景

商湯大裝置為商湯自研“日日新SenseNova”大模型體系的訓練迭代提供了強大算力支撐,以及1.5萬億token和6000億中文高質量數(shù)據,推出了商量大語言模型,AIGC等大模型,并在多個權威大模型測評榜單中位居前列。

商湯還助力某業(yè)界領先的認知智能公司打造了高性能算力平臺,提高模型訓練速度和效率,已成功推出了400億參數(shù)量的大模型,快速滿足不同領域和場景需求。

生成式AI應用場景

依托商湯大裝置,商湯聯(lián)合中公教育發(fā)布虛擬數(shù)字講師“小鹿老師”,相比傳統(tǒng)人工直播,不僅降低了80%錄課成本,還提高了2~3倍的課程豐富度,實現(xiàn)教學質量和效率雙重提升。

商湯還助力微博打造“營銷大模型”,讓每位博主都能擁有自己的AI營銷助手,短短數(shù)月便有超7000位微博達人采用AIGC生成69萬篇文案,采用率高達95%。

智算中心建設與運營

商湯與重慶南岸區(qū)攜手打造的“重慶人工智能計算中心(AIDC)”,以國產化算力為核心,首期建設峰值算力達100Petaflops,為西南地區(qū)的各行各業(yè)、科研機構提供AI算力、大模型訓練、推理部署和應用開發(fā)等服務。

商湯助力打造福建省大數(shù)據算力平臺,第一階段已建成125Petaflops算力規(guī)模,并有多家數(shù)字生態(tài)領軍企業(yè)入駐,有望推動生成式AI技術在醫(yī)療、金融、制造等各個產業(yè)中的落地。

《白皮書》最后指出,隨著新一代AI基礎設施的邊際成本持續(xù)下降、邊際效益持續(xù)增長,AI將普惠每一個人。

審核編輯:湯梓紅

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關注

    關注

    87

    文章

    29806

    瀏覽量

    268103
  • 人工智能
    +關注

    關注

    1789

    文章

    46652

    瀏覽量

    237073
  • 大模型
    +關注

    關注

    2

    文章

    2274

    瀏覽量

    2356

原文標題:AI 2.0時代需要怎樣的AI基礎設施?《新一代人工智能基礎設施白皮書》給出答案

文章出處:【微信號:SenseTime2017,微信公眾號:商湯科技SenseTime】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    NVIDIA助力印度打造AI基礎設施

    在孟買舉辦的 NVIDIA AI Summit 上,黃仁勛和穆克什·安巴尼(Mukesh Ambani)探討了關于 AI 基礎設施的投資,這些投資有望為各行各業(yè)帶來變革。
    的頭像 發(fā)表于 10-27 09:44 ?202次閱讀

    Arm攜手三星開拓新一代通信技術

    的實用技術,需處理的數(shù)據量將呈指數(shù)級增長。數(shù)據量的激增給網絡運營商帶來了巨大壓力,它們不僅要維護現(xiàn)有網絡,還要為下一代網絡進行技術創(chuàng)新。為此,它們對節(jié)能且可擴展的計算基礎設施的迫切需求更勝以往。 高效計算在新一代通信技術和
    的頭像 發(fā)表于 08-26 09:48 ?658次閱讀

    一代高功能新一代AI加速器(DRP-AI3):10x在高級AI系統(tǒng)高級AI中更快的嵌入處理

    電子發(fā)燒友網站提供《下一代高功能新一代AI加速器(DRP-AI3):10x在高級AI系統(tǒng)高級AI
    發(fā)表于 08-15 11:06 ?0次下載
    下<b class='flag-5'>一代</b>高功能<b class='flag-5'>新一代</b><b class='flag-5'>AI</b>加速器(DRP-<b class='flag-5'>AI</b>3):10x在高級<b class='flag-5'>AI</b>系統(tǒng)高級<b class='flag-5'>AI</b>中更快的嵌入處理

    螞蟻數(shù)科發(fā)布新一代融合AI風控引擎“AIR Engine”

    在數(shù)字化浪潮的推動下,金融科技領域的風控技術正迎來新的突破。近日,螞蟻數(shù)科旗下的蟻盾風控團隊正式發(fā)布了新一代融合AI風控引擎——“AIR Engine(AIFUSERiskEngine)”,該引擎在原有的決策式AI架構基礎上,創(chuàng)
    的頭像 發(fā)表于 06-26 18:20 ?1178次閱讀

    DPU技術賦能下一代AI算力基礎設施

    4月19日,在以“重構世界 奔赴未來”為主題的2024中國生成式AI大會上,中科馭數(shù)作為DPU新型算力基礎設施代表,受邀出席了中國智算中心創(chuàng)新論壇,發(fā)表了題為《以網絡為中心的AI算力底座構建之路》主題演講,勾勒出在通往AGI之路
    的頭像 發(fā)表于 04-20 11:31 ?788次閱讀

    群英講堂 | 英飛凌PA柵壓管理解決方案助力新一代通訊基礎設施

    新一代移動通信技術,是在4G的基礎上進化而來的項全新技術。它具有更高的數(shù)據傳輸速度,更低的延遲和更廣的覆蓋范圍,可以實現(xiàn)更加安全、可靠、高效的通信體驗。相較于4G,新一代通訊網絡不僅能夠為人們帶來更好的通信體驗,也將推動物聯(lián)網
    的頭像 發(fā)表于 04-19 14:49 ?349次閱讀
    群英講堂 | 英飛凌PA柵壓管理解決方案助力<b class='flag-5'>新一代</b>通訊<b class='flag-5'>基礎設施</b>

    Arm發(fā)布新一代Ethos-U AI加速器 Arm旨在瞄準國產CPU市場

    Arm發(fā)布的新一代Ethos-U AI加速器確實在業(yè)界引起了廣泛關注。
    的頭像 發(fā)表于 04-18 15:59 ?693次閱讀

    商湯科技董事長兼CEO徐立:AI 2.0時代的“新質生產力工具”

    AI 2.0時代,生成式AI被視為推動生產力進步的重要技術,如果能在知識、推理、執(zhí)行三層能力上實現(xiàn)突破,將真正帶來整個社會生產力的跨越式發(fā)展。”
    的頭像 發(fā)表于 03-25 09:41 ?350次閱讀
    商湯科技董事長兼CEO徐立:<b class='flag-5'>AI</b> <b class='flag-5'>2.0</b><b class='flag-5'>時代</b>的“新質生產力工具”

    商湯科技:AI 2.0時代的“新質生產力工具”

    2024年全球開發(fā)者先鋒大會(GDC)在上海盛大開幕,匯聚了全球頂尖的開發(fā)者與科技創(chuàng)新者。商湯科技董事長兼CEO徐立受邀出席,并發(fā)表了題為《AI 2.0時代的“新質生產力工具”》的主旨演講,引發(fā)了廣泛關注和深度思考。
    的頭像 發(fā)表于 03-25 09:28 ?586次閱讀

    惠普推出新一代AI游戲本,并計劃推出首個AI PC本地AI解決方案

    近日,惠普發(fā)布了新一代AI游戲筆記本電腦,這些新款筆記本在性能和AI功能方面都有顯著提升。其中,14英寸暗影精靈10 SLIM被公認為惠普目前最輕的游戲筆記本,它搭載了酷睿Ultra 7-155H處理器和RTX 4060/407
    的頭像 發(fā)表于 01-22 15:58 ?868次閱讀

    智譜AI推出新一代基座大模型GLM-4

    智譜AI近日宣布推出新一代基座大模型GLM-4。這模型在整體性能上相較上一代實現(xiàn)了大幅提升,其表現(xiàn)已逼近GPT-4。
    的頭像 發(fā)表于 01-17 15:29 ?970次閱讀

    商湯科技發(fā)布新一代大語言模型書生·浦語2.0

    1月17日,商湯科技與上海AI實驗室聯(lián)合香港中文大學和復旦大學正式發(fā)布新一代大語言模型書?·浦語2.0(InternLM2)。
    的頭像 發(fā)表于 01-17 15:03 ?742次閱讀
    商湯科技發(fā)布<b class='flag-5'>新一代</b>大語言模型書生·浦語<b class='flag-5'>2.0</b>

    2024 AI智算產業(yè)趨勢報告

    當下智算時代雖然在初級階段,依托AI大模型形成的新一代算力基礎設施AI應用已經在諸多領域嶄露頭角。 數(shù)字中國愿景的實現(xiàn),基石在于夯實數(shù)字化
    發(fā)表于 01-17 09:40 ?448次閱讀
    2024 <b class='flag-5'>AI</b>智算產業(yè)趨勢報告

    墨芯:聚焦顛覆性技術創(chuàng)新 爭當AI芯片2.0時代全球領跑者

    墨芯作為具有革新性的ai芯片設計師,擁有世界領先的自主開發(fā)稀有算法,作為雙重稀有算法的發(fā)明者,公司的目標是制造世界新一代人工智能芯片,成為ai芯片2
    的頭像 發(fā)表于 12-08 10:28 ?663次閱讀

    Azure AI 基礎設施強勢升級!進步擴展人工智能能力

    微軟 Azure AI 基礎設施是微軟擴展產品和服務的核心支柱,為開發(fā)人員提供在 Azure 平臺上 構建下一代 AI 驅動的應用程序所需的系統(tǒng)、工具和資源。 微軟在硬件和
    的頭像 發(fā)表于 11-21 08:15 ?486次閱讀
    Azure <b class='flag-5'>AI</b> <b class='flag-5'>基礎設施</b>強勢升級!進<b class='flag-5'>一</b>步擴展人工智能能力