0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

AIGC繁花,綻放在精耕的算力土壤之上

腦極體 ? 來源:腦極體 ? 作者:腦極體 ? 2023-06-13 18:38 ? 次閱讀

2023年的春天,稱得上一句AI之春。大模型成為技術(shù)力量新的爆發(fā)點(diǎn),生成式AI(AIGC)應(yīng)用風(fēng)起云涌。

產(chǎn)業(yè)界爭先恐后訓(xùn)大模型之際,廣大用戶最大的困惑是——發(fā)布了,但就是玩不到啊!

OpenAI有地域限制且不去說它,各種國產(chǎn)大模型也很少有大大方方讓大家隨便用的,排隊(duì)等邀請(qǐng)碼、群里求測試賬號(hào)、不開放API、只定向邀請(qǐng)企業(yè)客戶、上線沒幾天停止訪問……

過去幾個(gè)月,想用AIGC的人,沒少受這些折磨。

當(dāng)然,這種局面也不能怪大模型的開發(fā)運(yùn)營團(tuán)隊(duì),實(shí)在是“心有余而力不足”——AI算力太緊缺了。

想開發(fā)大模型的高校和研究機(jī)構(gòu),搶不到、買不起GPU卡;已經(jīng)發(fā)布的大模型,用戶暴漲,導(dǎo)致算力需求的指數(shù)級(jí)增長和巨大的成本壓力,撐不住訪問。

就像保爾·芒圖在《十八世紀(jì)產(chǎn)業(yè)革命》中說的那樣:“經(jīng)濟(jì)演變是比較混亂的,好像撒在大地上的種子那樣慢慢生長。無數(shù)模糊不明的事實(shí),在細(xì)節(jié)上幾乎是微不足道的,但彼此無限地相互改變著”。

新型AI算力基礎(chǔ)設(shè)施,就是那個(gè)至關(guān)重要的細(xì)節(jié),直接影響到這次智能產(chǎn)業(yè)革命的進(jìn)程。

在諸多解決方案中,新華三的破題思路,別具特色,一言以蔽之——精耕務(wù)實(shí)。

首先讓我們先從算力本身出發(fā),去看看大模型時(shí)代的AI奮鋤者,究竟需要什么?又能得到什么?

晨興理荒穢:算力土壤,為何貧瘠?

AIGC的價(jià)值潛力已經(jīng)十分明晰,讓大模型成了各大科技企業(yè)爭相搶奪的那顆“好苗子”。

陶淵明描寫古人耕種要“晨興理荒穢,帶月荷鋤歸”,先摘除阻礙作物生長的雜草,才能保障后續(xù)的收成。

所以,首先要搞清楚一個(gè)問題,為什么AI算力顯得如此貧瘠?

第一,供給不足。受摩爾定律達(dá)到天花板的影響,計(jì)算硬件的性能提升越來越有限,AI算力短缺問題長期存在,大模型又進(jìn)一步加劇了算力焦渴。以176B參數(shù)規(guī)模的大模型為例,F(xiàn)P16精度下,訓(xùn)練過程內(nèi)存峰值會(huì)達(dá)到2800G+,需要35張以上80G顯存的GPU才能容納。很多國內(nèi)高校,有AI人才、技術(shù)積累,想要探索大模型,卻買不到、買不起GPU卡,止步于昂貴的AI算力門檻,是非常可惜的。

第二,需求溢出。大模型和生成式AI(AIGC)的出現(xiàn),微軟、谷歌、百度等科技巨頭,都在用AI重新構(gòu)想所有的核心產(chǎn)品。技術(shù)的快速溢出,算力基礎(chǔ)設(shè)施沒有來得及跟上,造成了AI算力供需的不匹配。隨著AIGC擴(kuò)展到每個(gè)領(lǐng)域,越來越多的智力勞動(dòng)逐步被AI化、自動(dòng)化,算力供需的“剪刀差”,還會(huì)繼續(xù)拉大。

第三,效率低下。企業(yè)/科研機(jī)構(gòu)對(duì)模型開發(fā)和AI全域應(yīng)用的不了解、不高效,會(huì)直接導(dǎo)致準(zhǔn)備不充足,比如訓(xùn)練數(shù)據(jù)質(zhì)量低、AI應(yīng)用開發(fā)經(jīng)驗(yàn)不足、資源損耗大;研發(fā)周期長,比如大模型研發(fā)慢、推理效果差,不得不反復(fù)迭代試錯(cuò),也就消耗了更多的時(shí)間成本、算力成本。

第四,安全隱患。數(shù)據(jù)是模型核心的原材料,企業(yè)私域數(shù)據(jù)更是企業(yè)的核心資產(chǎn)。企業(yè)的大模型如果使用不當(dāng),會(huì)存在企業(yè)私域數(shù)據(jù)泄露的風(fēng)險(xiǎn),造成企業(yè)即便擁有大量算力也不敢放心使用。

第五,可持續(xù)顧慮?!胺偎挾?豈不獲得,而明年無獸”,這個(gè)道理同樣適用于大模型時(shí)代。大模型的數(shù)據(jù)處理量巨大,帶動(dòng)數(shù)據(jù)中心耗電量快速增加。GPT-3大模型每次訓(xùn)練,碳排放量高達(dá)552噸。中國大模型和AIGC的發(fā)展,必須建立在綠色節(jié)能的算力基礎(chǔ)設(shè)施上,“東數(shù)西算”工程就為各地新建數(shù)據(jù)中心PUE,提出了嚴(yán)格的要求。

面對(duì)AI算力貧瘠的局面,干著急是沒有用的,唯有靠勞作者揮鋤挖地,為行業(yè)理清荒穢,釋放算力這一新生產(chǎn)力。

迎著大模型和AIGC的晨光,新華三已經(jīng)開始培育AI的土壤。

精耕細(xì)作:新華三蘊(yùn)育全棧AI

“算力不足,那就增加供給,堆GPU卡,上服務(wù)器,建數(shù)據(jù)中心集群”——這是常規(guī)思路。

新華三的AI蘊(yùn)育之路沒這么簡單,在剛剛落幕的2023 NAVIGATE 領(lǐng)航者峰會(huì)上,新華三正式發(fā)布了“百業(yè)靈犀LinSeer”私域大模型和支持AIGC大算力調(diào)度的“傲飛算力平臺(tái)”,可與業(yè)務(wù)深度結(jié)合提升工作效率,持續(xù)優(yōu)化算法和積累公域數(shù)據(jù),為客戶提供最新知識(shí)能力。同時(shí)推出了“AIGC開放戰(zhàn)略”,既支持“百業(yè)靈犀+新華三ICT基礎(chǔ)架構(gòu)”的模式保障數(shù)據(jù)安全,實(shí)現(xiàn)最優(yōu)配合,同時(shí)也支持“客戶自選大模型+新華三ICT基礎(chǔ)架構(gòu)”的模式滿足多種需求。

新華三如此用心耕耘,這么多的復(fù)合能力,究竟能為這一波AI浪潮帶來什么?

第一步,培土,讓大模型“用有其算”。

解決算力瓶頸,提供充足、普惠且安全的AI算力,支持高校、科研機(jī)構(gòu)和廣大企業(yè)的充分探索,大模型和AIGC才有茁壯生長的可能性,靠的就是新華三智算解決方案的“算力基礎(chǔ)設(shè)施”,有三個(gè)顯著特點(diǎn):

充足。新華三對(duì)基礎(chǔ)設(shè)施進(jìn)行優(yōu)化,讓硬件發(fā)揮出極致性能。打造了超高性能AI服務(wù)器,強(qiáng)勢推出H3C UniServer R5500 G6,可以提供8卡H800 OAM訓(xùn)練能力,內(nèi)部互聯(lián)400Gb/s極速網(wǎng)絡(luò),支撐大模型的高效訓(xùn)練。CX8000高性能分布式并行文件存儲(chǔ),專為AI訓(xùn)練研發(fā),單節(jié)點(diǎn)IOPS可達(dá)20萬+,可以滿足AI超大規(guī)模數(shù)據(jù)對(duì)存力的需求。Seerfabric軟硬一體方案,通過跟AI深度融合,實(shí)現(xiàn)流量零丟包,發(fā)揮RoCE網(wǎng)絡(luò)最大性能,大模型訓(xùn)練時(shí)間縮短10%,配合主動(dòng)安全全面防護(hù),為上層平臺(tái)和應(yīng)用提供安全、高效的算力支撐。

普惠。模型開發(fā)部署的過程中,通過傲飛算力平臺(tái)共享AI算力,降低算力空閑時(shí)間,可以將算力利用率提高至70%以上,智算中心成本大幅下降,提供普惠AI算力。

安全。避免大模型服務(wù)使用時(shí)造成的數(shù)據(jù)外泄是企業(yè)放心使用大模型的重要前提。新華三智算解決方案通過4大安全體系:傳輸安全+數(shù)據(jù)安全+訪問安全+安全審計(jì),保障用戶使用私域大模型的同時(shí),全方位保障私域數(shù)據(jù)安全,避免企業(yè)私域數(shù)據(jù)出域。

綠色。新華三的零碳數(shù)據(jù)中心,將各綠色單元組合起來,降低高算力帶來的碳排放問題;新一代液冷解決方案,可以將數(shù)據(jù)中心的PUE降到1.1及以下,滿足國家對(duì)數(shù)據(jù)中心的低碳要求,帶來綠色算力。

wKgZomSIRxGAQ7m3AANyCaUpP_k980.jpg

第二步,護(hù)苗,讓大模型“算有其法”。

從來沒有下過地的新手,很容易就糟蹋了種苗,浪費(fèi)了土地,更重要的是,錯(cuò)過了農(nóng)時(shí)。

大模型作為新技術(shù),很多參與者都是剛開始接觸,要抓住寶貴的產(chǎn)業(yè)機(jī)會(huì),必須有章法。新華三不僅提供“土壤”,還精心“護(hù)苗”,為大模型的成長、應(yīng)用,帶來了全鏈路的平臺(tái)和服務(wù)。

平臺(tái)層面,統(tǒng)一的數(shù)據(jù)平臺(tái)“綠洲”,可有效進(jìn)行數(shù)據(jù)全生命周期管理;支持AIGC的大算力調(diào)度平臺(tái)“傲飛”,提供包含智能標(biāo)注、智能訓(xùn)練、智能調(diào)優(yōu)、智能部署、智能推理的全流程算力智能調(diào)度,支持8000節(jié)點(diǎn)的算力調(diào)度,并發(fā)訓(xùn)練時(shí)間縮短至50%,斷點(diǎn)自動(dòng)接續(xù)無感知訓(xùn)練更穩(wěn)定,全方面提升大模型訓(xùn)練性能。

服務(wù)層面,針對(duì)大模型預(yù)訓(xùn)練/微調(diào)、強(qiáng)化學(xué)習(xí)、提示學(xué)習(xí)等特點(diǎn),新華三根據(jù)自身大模型實(shí)踐經(jīng)驗(yàn),封裝了推理、微調(diào)、訓(xùn)練這三種大模型服務(wù)能力,降低大模型使用門檻。

比如基座大模型推理,對(duì)推理架構(gòu)/執(zhí)行/過程進(jìn)行優(yōu)化,并提供配套基礎(chǔ)設(shè)施,可以為科研工作者構(gòu)建AI科研環(huán)境,滿足數(shù)據(jù)挖掘分析、模式識(shí)別等需求。新華三的“傳輸安全+數(shù)據(jù)安全+訪問安全+安全審計(jì)”4大安全體系,可以在私域大模型的訓(xùn)練推理過程中,保障企業(yè)數(shù)據(jù)資產(chǎn)的安全不外流。

私域大模型微調(diào),新華三的10+種基座大模型,結(jié)合微調(diào)優(yōu)化,可以助力企業(yè)快速打造垂直領(lǐng)域私域大模型,實(shí)現(xiàn)小時(shí)級(jí)生成。

自主大模型訓(xùn)練,提供100多個(gè)評(píng)估維度與評(píng)估指標(biāo),如BLEU、ROUGE、METEOR等,有效縮短模型的研發(fā)周期。

接下來,孕蕾,讓大模型“算有所值”。

大模型和AIGC要通過產(chǎn)業(yè)落地,來完成技術(shù)的價(jià)值轉(zhuǎn)換。要結(jié)出更多的應(yīng)用果實(shí),前提是與百行百業(yè)開始連接、探索落地業(yè)務(wù)場景、孕育應(yīng)用的花蕾。

這個(gè)“傳花授粉”的過程,僅靠單一的產(chǎn)業(yè)角色是無法完成的。新華三構(gòu)建了一個(gè)開放的產(chǎn)業(yè)生態(tài),吸引合作伙伴參與到大模型建設(shè)中,共同蘊(yùn)育全棧AI的無限潛力。

全棧AI的生態(tài)繁榮,才有大模型的碩果累累,技術(shù)紅利的價(jià)值落地。

可以看到,正是新華三的精耕細(xì)作、用心栽培,大大降低了大模型和AIGC的發(fā)育難度。

借助新華三的智算解決方案,越來越多的研究者/企業(yè),可以從算力焦灼中解放出來,抓住寶貴的增長窗口期,培育屬于自己的大模型。

由此,可以引出下一個(gè)話題:與時(shí)代同步,培育大模型“土壤”,為什么是新華三?

實(shí)地立身:新華三的根深,大模型的葉茂

大模型和新型智能基礎(chǔ)設(shè)施,是第四次產(chǎn)業(yè)革命的關(guān)鍵,也是數(shù)字經(jīng)濟(jì)的大勢所趨,坦率地說,這個(gè)產(chǎn)業(yè)趨勢是顯而易見的。

但是,看到趨勢,并不一定能抓住趨勢。

大模型和AIGC等新技術(shù)的發(fā)展與應(yīng)用,相當(dāng)于在一片晨霧和產(chǎn)業(yè)荒原中摸索。算力基礎(chǔ)設(shè)施服務(wù)商,不可能“以其昏昏,使人昭昭”,自己都沒搞懂大模型和AIGC,自然沒法賦能研究者和高科技企業(yè)。

能構(gòu)建一套清晰可行的智算解決方案,新華三的優(yōu)勢就是“腳踏實(shí)地”。

首先,新華三的技術(shù)根深,可以構(gòu)筑新價(jià)值。

深耕ICT領(lǐng)域,承擔(dān)AI領(lǐng)域科研課題的新華三,技術(shù)能力與產(chǎn)品積累非常深厚,布局廣泛,能夠?yàn)槿珬?a href="http://www.ttokpm.com/soft/data/42-102/" target="_blank">AI技術(shù)、軟硬件和服務(wù),提供持續(xù)創(chuàng)新的動(dòng)能。

此外,新華三的創(chuàng)新務(wù)實(shí),可以解決真問題。

大模型時(shí)代的技術(shù)變化和產(chǎn)業(yè)應(yīng)用日新月異,各行業(yè)的落地條件和能力稟賦也有所不同,這就要求基礎(chǔ)設(shè)施服務(wù)商對(duì)變化有深刻且快速的洞察,才能確保每個(gè)行業(yè)/產(chǎn)學(xué)研各類用戶的需求都得到滿足。

作為數(shù)字化解決方案領(lǐng)導(dǎo)者,新華三有豐富的服務(wù)實(shí)體產(chǎn)業(yè)經(jīng)驗(yàn),可以及時(shí)洞察產(chǎn)業(yè)客戶的需求,進(jìn)行技術(shù)和產(chǎn)品的更新迭代,讓每一個(gè)創(chuàng)新都能切實(shí)解決用戶在意的真問題。

智算解決方案中,普惠算力,高效易用的平臺(tái),軟硬拉通的服務(wù)等,都來自產(chǎn)業(yè)用戶在業(yè)務(wù)場景中成本敏感、效率優(yōu)化等實(shí)際痛點(diǎn)。

回頭對(duì)比一下幾年前的生活,會(huì)發(fā)現(xiàn)AI技術(shù)已經(jīng)在切實(shí)影響、改變我們的社會(huì)經(jīng)濟(jì)。大模型的到來,讓智能變革繼續(xù)加速,最終每個(gè)人、每個(gè)行業(yè)乃至每一個(gè)國家,都會(huì)是人工智能的參與者和受益人。

產(chǎn)業(yè)智能革命的土壤,從未像今天一樣肥沃。在新華三的基礎(chǔ)設(shè)施底座上,大模型這顆種子,正在茁壯生長。接下來,就看百行百業(yè)如何釋放大模型的無限想象,將AIGC的碩果垂?jié)M中華。

審核編輯黃宇

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 服務(wù)器
    +關(guān)注

    關(guān)注

    12

    文章

    8701

    瀏覽量

    84547
  • 算力
    +關(guān)注

    關(guān)注

    1

    文章

    836

    瀏覽量

    14573
  • AIGC
    +關(guān)注

    關(guān)注

    1

    文章

    332

    瀏覽量

    1372
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    2136

    瀏覽量

    1979
收藏 人收藏

    評(píng)論

    相關(guān)推薦

    大模型時(shí)代的需求

    現(xiàn)在AI已進(jìn)入大模型時(shí)代,各企業(yè)都爭相部署大模型,但如何保證大模型的,以及相關(guān)的穩(wěn)定性和性能,是一個(gè)極為重要的問題,帶著這個(gè)極為重要的問題,我需要在此書中找到答案。
    發(fā)表于 08-20 09:04

    中科曙光入選2024服務(wù)產(chǎn)業(yè)圖譜及服務(wù)產(chǎn)品名錄

    近日,中國信通院公布首個(gè)《服務(wù)產(chǎn)業(yè)圖譜(2024年)》及《服務(wù)產(chǎn)品名錄(2024年)》。曙光智構(gòu)建的全國一體化
    的頭像 發(fā)表于 08-06 14:23 ?417次閱讀

    浪潮信息攜手天府云數(shù)據(jù)科技推出了42kW智風(fēng)冷

    不僅標(biāo)志著我國智基礎(chǔ)設(shè)施邁入了全新的高密度、高效能時(shí)代,更為人工智能、自動(dòng)駕駛、生物制藥、AIGC(人工智能生成內(nèi)容)及智能制造等多個(gè)前沿領(lǐng)域提供了強(qiáng)有力的支撐。
    的頭像 發(fā)表于 07-15 16:18 ?479次閱讀

    基礎(chǔ)設(shè)施的風(fēng)險(xiǎn)與挑戰(zhàn)

    編者按網(wǎng)絡(luò)有一個(gè)美好的愿景,就是希望網(wǎng),能像電力和電網(wǎng)一樣:
    的頭像 發(fā)表于 06-13 08:27 ?350次閱讀
    <b class='flag-5'>算</b><b class='flag-5'>力</b>基礎(chǔ)設(shè)施的風(fēng)險(xiǎn)與挑戰(zhàn)

    力系列基礎(chǔ)篇——101:從零開始了解

    相信大家已經(jīng)感受到,我們正處在一個(gè)人工智能時(shí)代。如果要問在人工智能時(shí)代最重要的是什么?那必須是:!
    的頭像 發(fā)表于 04-24 08:05 ?1002次閱讀
    <b class='flag-5'>算</b>力系列基礎(chǔ)篇——<b class='flag-5'>算</b><b class='flag-5'>力</b>101:從零開始了解<b class='flag-5'>算</b><b class='flag-5'>力</b>

    AIGC需求革命,邊緣計(jì)算將不再“邊緣”

    AI瓶頸下邊緣計(jì)算崛起
    的頭像 發(fā)表于 04-22 14:51 ?240次閱讀

    能RADXA微服務(wù)器試用體驗(yàn)】Radxa Fogwise 1684X Mini 規(guī)格

    通過網(wǎng)絡(luò)可以了解到,能RADXA微服務(wù)器的具體規(guī)格: 處理器:BM1684X :高達(dá)32Tops INT8峰值 內(nèi)存:16GB L
    發(fā)表于 02-28 11:21

    智能規(guī)模超通用,大模型對(duì)智能提出高要求

    電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)是設(shè)備通過處理數(shù)據(jù),實(shí)現(xiàn)特定結(jié)果輸出的計(jì)算能力,常用FLOPS作為計(jì)量單位。FLOPS是Floating-point Operations Per Second
    的頭像 發(fā)表于 02-06 00:08 ?5459次閱讀

    大茉莉X16-P,5800M大稱王稱霸

    Rykj365
    發(fā)布于 :2024年01月25日 14:54:52

    網(wǎng)絡(luò)面臨三大挑戰(zhàn)

    2024年,以AIGC為代表的人工智能技術(shù)將進(jìn)一步激發(fā)需求,網(wǎng)絡(luò)、智中心、超
    的頭像 發(fā)表于 01-12 10:39 ?785次閱讀

    衛(wèi)星通信序幕拉開,AI浪潮澎湃

    AI浪潮催生要求,基礎(chǔ)設(shè)施需求持續(xù)提升。AIGC帶來的超大需求拉動(dòng)通信基礎(chǔ)設(shè)施建設(shè)及擴(kuò)容,光模塊作為數(shù)據(jù)傳輸?shù)幕A(chǔ)部件,需求首先迎來
    發(fā)表于 01-03 10:22 ?288次閱讀
    衛(wèi)星通信序幕拉開,AI<b class='flag-5'>算</b><b class='flag-5'>力</b>浪潮澎湃

    燧原科技與青云科技達(dá)成戰(zhàn)略合作,創(chuàng)新異構(gòu)調(diào)度

    ,AIGC內(nèi)容生成類模型正在重構(gòu)互聯(lián)網(wǎng)商業(yè)模式,催生數(shù)字經(jīng)濟(jì)新突破。隨著計(jì)算任務(wù)的多樣化和復(fù)雜化,更為高效和靈活的異構(gòu)計(jì)算是未來的發(fā)展方向。燧原的“云燧智集群”與青云AI平臺(tái)的深
    的頭像 發(fā)表于 12-11 12:20 ?499次閱讀

    探索AIGC未來:CPU源碼優(yōu)化、多GPU編程與中國瓶頸與發(fā)展

    ,大大提高人工智能模型的計(jì)算能力,更好地滿足實(shí)際應(yīng)用的需求。 本文將分析AIGC的最新進(jìn)展,深入探討以上話題,以及中國產(chǎn)業(yè)的瓶頸和趨勢。
    的頭像 發(fā)表于 12-08 11:49 ?1340次閱讀
    探索<b class='flag-5'>AIGC</b>未來:CPU源碼優(yōu)化、多GPU編程與中國<b class='flag-5'>算</b><b class='flag-5'>力</b>瓶頸與發(fā)展

    什么是?可分為哪些類別?

    計(jì)算是人類解決問題的一種方式。 在漫長的歷史長河中,人類遇到過很多問題,都需要通過計(jì)算來解決。這些計(jì)算任務(wù),僅憑大腦這個(gè)“原生”工具,是無法完成的。 于是,人類發(fā)明了很多
    的頭像 發(fā)表于 11-20 09:27 ?1.2w次閱讀
    什么是<b class='flag-5'>算</b><b class='flag-5'>力</b>?<b class='flag-5'>算</b><b class='flag-5'>力</b>可分為哪些<b class='flag-5'>算</b><b class='flag-5'>力</b>類別?

    到底什么是?的作用?

    的字面意思,大家都懂,就是計(jì)算能力(Computing Power)。
    的頭像 發(fā)表于 11-20 09:26 ?1573次閱讀
    到底什么是<b class='flag-5'>算</b><b class='flag-5'>力</b>?<b class='flag-5'>算</b><b class='flag-5'>力</b>的作用?