0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

東數(shù)西算駛?cè)肟燔嚨?什么數(shù)據(jù)適合“西算”

中科曙光 ? 來源:中科曙光 ? 作者:中科曙光 ? 2022-09-28 19:10 ? 次閱讀

1900億元新投資背后,東數(shù)西存、東數(shù)西渲、東數(shù)西訓(xùn)引關(guān)注。

今年2月,國家發(fā)改委等多部門印發(fā)通知,建設(shè)10大國家數(shù)據(jù)中心集群,全面啟動“東數(shù)西算”工程。這一項目意在用西部算力支持東部數(shù)字經(jīng)濟,同時拉動西部發(fā)展,截至今年4月已帶動1900億元新項目。

近幾個月來,算力、網(wǎng)絡(luò)一直是東數(shù)西算工程中的話題焦點。但本周,由知名機構(gòu)中國智算產(chǎn)業(yè)聯(lián)盟牽頭發(fā)布的《東數(shù)西算下新型算力基礎(chǔ)設(shè)施發(fā)展白皮書》(簡稱:白皮書)傳遞出一個新觀點——海量溫冷數(shù)據(jù)的“東數(shù)西存”或許才是首要課題,引起產(chǎn)業(yè)的廣泛關(guān)注。

近日,智東西與中科曙光存儲事業(yè)部副總經(jīng)理張新鳳線上通話,就這一話題進行了深入探討。

27d582a0-3f1b-11ed-9e49-dac502259ad0.jpg

▲中科曙光存儲事業(yè)部副總經(jīng)理張新鳳

01.

溫冷數(shù)據(jù)占95%,“東數(shù)西存”引關(guān)注

作為國內(nèi)首部關(guān)于東數(shù)西算智能算力設(shè)施的產(chǎn)業(yè)白皮書,報告指出:占據(jù)數(shù)據(jù)總量95%的溫冷數(shù)據(jù)更適合“西算”。所謂溫冷數(shù)據(jù),簡單來說,是指代對實時性要求較低的數(shù)據(jù)。這一說法明確回答了“什么數(shù)據(jù)適合‘西算’”的關(guān)鍵問題。

27f411ac-3f1b-11ed-9e49-dac502259ad0.png

我們知道,在信息傳輸中,無論網(wǎng)絡(luò)帶寬多大,傳輸時延都是客觀存在的。因此,在 “東數(shù)西算”中,需要被計算節(jié)點頻繁訪問、網(wǎng)絡(luò)時延要求高的實時在線類 “熱數(shù)據(jù)” 不適合 “西算”,而離線類訪問頻率低、網(wǎng)絡(luò)時延要求不高的“冷數(shù)據(jù)”,以及介于兩者之間的“溫數(shù)據(jù)”,更適合“西算”。

張新鳳告訴智東西,占據(jù)數(shù)據(jù)總量的95%溫冷數(shù)據(jù)對存儲的需求凸顯,要求東數(shù)西算注意算力和存儲的協(xié)同發(fā)展。在實際應(yīng)用中,一些重計算的應(yīng)用場景將算力排在第一位,以存儲輔助支撐;但有不少用戶以數(shù)據(jù)密集型應(yīng)用為需求,存儲占比在數(shù)據(jù)中心中會更大。

作為東數(shù)西算的子場景,東數(shù)西存需求日益引起關(guān)注。張新鳳看到,存儲產(chǎn)業(yè)已經(jīng)被東數(shù)西算工程帶動。

從曙光存儲自身來說,其今年已參與了多個相關(guān)項目;在這個過程中,團隊看到了用戶對于更大存儲容量的需求,已從100PB規(guī)模發(fā)展到300~500PB。

當(dāng)下,東數(shù)西算工程更強調(diào)應(yīng)用的場景化。根據(jù)白皮書,溫冷數(shù)據(jù)的“東數(shù)西存”,以及更細分場景,比如視頻游戲應(yīng)用所需的 “東數(shù)西渲”、AI模型訓(xùn)練所需的“東數(shù)西訓(xùn)”等,對存儲、算力要求高,但對數(shù)據(jù)實效性要求不高的應(yīng)用場景,都將成為“東數(shù)西算”未來應(yīng)用的重要支點。

實際點說,東數(shù)西算更關(guān)注供需關(guān)系。通過對東西部算力、存力等資源供需關(guān)系的合理匹配,讓“東數(shù)西算”融入到各個實際業(yè)務(wù)場景中,尤為重要。

而“東數(shù)西存”“東數(shù)西渲”“東數(shù)西訓(xùn)”等應(yīng)用場景,是推動“東數(shù)西算”均衡發(fā)展的有效途徑。

02.

東數(shù)西算駛?cè)肟燔嚨?存儲面臨四大轉(zhuǎn)型需求

將算力資源提升到水、電、燃氣等基礎(chǔ)資源的高度,進行跨區(qū)域調(diào)配,東數(shù)西算倡導(dǎo)的戰(zhàn)略價值已被各界認同。地方和產(chǎn)業(yè)龍頭都采取了行動,表現(xiàn)在成果上,根據(jù)工信部數(shù)據(jù),截至今年4月東數(shù)西算已帶動1900億元新項目,預(yù)計到年底這一數(shù)據(jù)可能達到4000億元。

根據(jù)白皮書,“東數(shù)西算”工程的啟動實施,將直接拉動新一輪數(shù)據(jù)中心建設(shè)投資,自2022年以來,全國10個數(shù)據(jù)中心集群中,新開工項目達到25個,新增數(shù)據(jù)中心規(guī)模達54萬標(biāo)準(zhǔn)機架。通用、智算、邊緣算力節(jié)點正在連成“算力一張網(wǎng)”。

張新鳳說,東數(shù)西算已進入了快速落地的階段,更豐富的適配場景和更細化、更系統(tǒng)的關(guān)鍵技術(shù)的評價指標(biāo),都加速了東數(shù)西算落地可行性。與此同時,東數(shù)西算也對數(shù)據(jù)中心提出了新的要求。具體到存儲層面,張新鳳談到了以下幾點:

1、東數(shù)西算中CPU、GPU等結(jié)合的異構(gòu)計算較多,對存儲要求高。如何打通數(shù)據(jù)高速共享,提升性能效率,是需要解決的首要問題。

2、容器、云原生等眾多新技術(shù)及應(yīng)用落地東數(shù)西算,對存儲協(xié)議提出多樣化需求,要求存儲供應(yīng)商提前做好技術(shù)布局和支持。

3、作為國家工程,東數(shù)西算更強調(diào)數(shù)據(jù)安全,需要存儲系統(tǒng)從軟、硬件等多個層面上做好國產(chǎn)化等全方位考慮。

4、東數(shù)西算對于PUE值要求的比較高,怎么保證存儲系統(tǒng)綠色低碳,市面上的產(chǎn)品和廠家還比較少。

這些需求結(jié)合起來,實際上為企業(yè)入場東數(shù)西存設(shè)置了不小的門檻。而突破這些門檻,也成為了東數(shù)西算駛?cè)肟燔嚨佬枰缭降募夹g(shù)圍欄。如果不跨越這些圍欄,必將影響東數(shù)西算設(shè)施在后續(xù)規(guī)?;涞貞?yīng)用中發(fā)揮應(yīng)有作用。

03.

從10PB到300PB 曙光提早布局東數(shù)西存

曙光自2009年推出第一代分布式存儲系統(tǒng)ParaStor以來,至今仍是國內(nèi)為數(shù)不多掌握底層技術(shù)、實現(xiàn)代碼級開發(fā)與優(yōu)化的分布式存儲系統(tǒng)廠商。

張新鳳告訴智東西,經(jīng)過超10年迭代,ParaStor單套規(guī)模已從16PB升級到100PB、300PB的超大項目。要知道,對于存儲系統(tǒng)來說這是一個質(zhì)變的過程。它需要支持數(shù)百存儲節(jié)點、數(shù)千計算節(jié)點的部署,還要打破網(wǎng)絡(luò)架構(gòu)的瓶頸。也正是一次次這樣的突破,讓客戶認可了曙光存儲深厚的技術(shù)功底。

作為東數(shù)西算項目中重要參與者,曙光存儲從四大新需求切入,支持東數(shù)西算工程算力和存儲的協(xié)調(diào)、創(chuàng)新發(fā)展。

曙光ParaStor單一存儲節(jié)點同時支持文件、塊、對象、HDFS四種存儲服務(wù),實現(xiàn)海量異構(gòu)數(shù)據(jù)統(tǒng)一納管,提升異構(gòu)計算存儲的性能效率,滿足東數(shù)西算中人工智能、云計算、容器還有云原生等技術(shù)需求。

曙光存儲通過代碼級開發(fā)與優(yōu)化,從部件、網(wǎng)絡(luò)、節(jié)點、數(shù)據(jù)冗余等各層面保證數(shù)據(jù)的安全性及系統(tǒng)的穩(wěn)健性,滿足東數(shù)西算工程對海量存儲的更高安全性級別的要求。

談及綠色低碳發(fā)展,張新鳳說,曙光正在把多年來積累的節(jié)能技術(shù),從算力延展到存儲上,并將發(fā)布業(yè)內(nèi)首款液冷存儲系統(tǒng)。未來將與計算節(jié)點形成一體化解決方案,幫助數(shù)據(jù)中心獲得更高節(jié)能等級,實現(xiàn)更低的PUE值的目標(biāo)。

根據(jù)白皮書,以西部(重慶)科學(xué)城先進數(shù)據(jù)中心為例,其采用了浸沒液冷技術(shù)、余熱回收、綠色建筑、清潔能源(光伏)等多種相關(guān)技術(shù),使得項目年均PUE可達到1.144,年節(jié)省用電約為14624.8 MWh,年節(jié)省標(biāo)準(zhǔn)煤4870噸,年減少二氧化碳排放13149噸。

在談到對東數(shù)西算智能化場景的應(yīng)用支持時,張新鳳說,以自動駕駛為例,從L1到L5階段產(chǎn)生的數(shù)據(jù)量達百倍增長,其中大多是對溫冷數(shù)據(jù)的進一步處理,從而實現(xiàn)研發(fā)速度、模型精度的提升。曙光一方面提供多種協(xié)議支持,滿足自動駕駛數(shù)據(jù)在采集、存儲、處理、分析等不同流程應(yīng)用需求;一方面通過精細化的權(quán)限控制,保障數(shù)據(jù)存取安全和訪問合規(guī)。

可以看到,隨著東數(shù)西算駛?cè)肟燔嚨溃瑢嶋H應(yīng)用場景和客戶需求正呼喚存儲產(chǎn)業(yè)進行迭代,以曙光為代表的產(chǎn)業(yè)玩家已拿出看家本領(lǐng),并吃到新的產(chǎn)業(yè)紅利。

04.

結(jié)語:東數(shù)西存 “全國算力一張網(wǎng)”建設(shè)的預(yù)備關(guān)

當(dāng)下,東數(shù)西算成為支持數(shù)字經(jīng)濟發(fā)展的重要舉措。根據(jù)中國信通院發(fā)布的數(shù)據(jù),在算力中每投入1元,將帶動3-4元經(jīng)濟產(chǎn)出;算力發(fā)展指數(shù)每提高1點,GDP增長約1293億元。

值得一提的是,東數(shù)西算中的“算”非常重要,但“存”也應(yīng)該被同等重視。東數(shù)西算對當(dāng)下的存儲產(chǎn)業(yè)提出了綠色、創(chuàng)新、安全等多方面新要求,關(guān)系到“算力一張網(wǎng)”建設(shè)大局。這為存儲產(chǎn)業(yè)玩家?guī)砹诵绿魬?zhàn),也帶來了新的市場空間。

(作者|李水青)

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 存儲
    +關(guān)注

    關(guān)注

    13

    文章

    4228

    瀏覽量

    85580
  • 中科曙光
    +關(guān)注

    關(guān)注

    5

    文章

    292

    瀏覽量

    17740
  • 數(shù)字經(jīng)濟
    +關(guān)注

    關(guān)注

    2

    文章

    1036

    瀏覽量

    18238
  • 算力
    +關(guān)注

    關(guān)注

    1

    文章

    907

    瀏覽量

    14699
  • 東數(shù)西算
    +關(guān)注

    關(guān)注

    0

    文章

    77

    瀏覽量

    2669

原文標(biāo)題:什么數(shù)據(jù)適合“西算”?

文章出處:【微信號:sugoncn,微信公眾號:中科曙光】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    九聯(lián)科技攜手智云網(wǎng)共繪智產(chǎn)業(yè)新篇章

    近日,智云網(wǎng)國家力節(jié)點直連調(diào)度項目啟動儀式在深圳隆重舉行。該項目聚焦國家力節(jié)點與主要城市間的高帶寬低時延直聯(lián)調(diào)度平臺的建設(shè),是響應(yīng)國家“數(shù)
    的頭像 發(fā)表于 09-11 16:31 ?320次閱讀

    燧原科技助力“數(shù)西”產(chǎn)業(yè)生態(tài)發(fā)展

    甘肅慶陽——全國力樞紐(甘肅?慶陽)首個萬P力上線國產(chǎn)萬卡力集群啟動暨數(shù)西
    的頭像 發(fā)表于 09-02 10:19 ?441次閱讀

    粵港澳大灣區(qū)首個大規(guī)模全液冷智中心完工

    該項目作為粵港澳大灣區(qū)內(nèi)首個大型全液冷智中心,不僅是國家“數(shù)西”戰(zhàn)略在該地區(qū)的重要部署,還被納入全國一體化
    的頭像 發(fā)表于 05-22 14:24 ?392次閱讀

    搶抓“數(shù)西”機遇,TA成2024年最熱門服務(wù)器!

    數(shù)西”,簡而言之,是將東部的數(shù)據(jù)運到西部的數(shù)據(jù)中心去存儲、計算。類似全國電網(wǎng),“
    的頭像 發(fā)表于 05-09 14:10 ?288次閱讀
    搶抓“<b class='flag-5'>東</b><b class='flag-5'>數(shù)</b><b class='flag-5'>西</b><b class='flag-5'>算</b>”機遇,TA成2024年最熱門服務(wù)器!

    西電-智芯工業(yè)半導(dǎo)體器件與感存芯片技術(shù)聯(lián)合實驗室簽約揭牌

    北京智芯微電子科技有限公司(簡稱“智芯公司”)與西安電子科技大學(xué)(簡稱“西電”)成功舉辦了“西電-智芯工業(yè)半導(dǎo)體器件與感存芯片技術(shù)聯(lián)合實驗室”的簽約暨揭牌儀式。
    的頭像 發(fā)表于 04-29 10:22 ?860次閱讀

    超云助力西力騰飛,榮膺2024全國“人工智能+”創(chuàng)新案例百強

    力、助力國家“數(shù)西”戰(zhàn)略實施中所作貢獻的強有力證明。 寧夏西力科技公司,是一家專注于構(gòu)建
    的頭像 發(fā)表于 04-19 17:09 ?306次閱讀
    超云助力<b class='flag-5'>西</b>云<b class='flag-5'>算</b>力騰飛,榮膺2024全國“人工智能+”創(chuàng)新案例百強

    亮相英偉達GTC大會!德賽西威高力智駕域控海外展出

    3月18日-21日,全球科技界聚焦美國圣何塞,英偉達在此期間召開2024年GTC大會。在這場被譽為AI行業(yè)風(fēng)向標(biāo)的盛會上,代表目前量產(chǎn)智能駕駛域控制器大力標(biāo)桿的德賽西威IPU04作為重點產(chǎn)品現(xiàn)場展出。
    的頭像 發(fā)表于 03-22 09:43 ?931次閱讀

    中國力供給緊張,建立全國力大市場刻不容緩

    考慮到這一現(xiàn)狀,早在去年 12 月份,國家發(fā)改委、國家數(shù)據(jù)局、中央網(wǎng)信辦、工業(yè)和信息化部、國家能源局就聯(lián)合發(fā)布了深化實施“數(shù)西”工程,搭
    的頭像 發(fā)表于 03-06 15:55 ?730次閱讀

    蘭洋科技入選“2023數(shù)西建設(shè)貢獻企業(yè)TOP50”

    近日,由中國科學(xué)院主管、科學(xué)出版社主辦的國家級核心期刊《互聯(lián)網(wǎng)周刊》聯(lián)合 eNet 研究院、德本咨詢評選的榜單“2023數(shù)西建設(shè)貢獻企業(yè)TOP50”正式公布,蘭洋科技榜上有名。同時
    的頭像 發(fā)表于 02-26 09:50 ?366次閱讀
    蘭洋科技入選“2023<b class='flag-5'>東</b><b class='flag-5'>數(shù)</b><b class='flag-5'>西</b><b class='flag-5'>算</b>建設(shè)貢獻企業(yè)TOP50”

    數(shù)西算是什么意思? 力的定義和應(yīng)用場景

    匯起源于中國計算機科學(xué)領(lǐng)域,用來形容那些優(yōu)秀的程序員或數(shù)據(jù)分析師。而在近年來,隨著人工智能領(lǐng)域的快速發(fā)展和應(yīng)用,數(shù)西的概念也逐漸擴展到了
    的頭像 發(fā)表于 01-30 09:57 ?2219次閱讀

    曙光全棧托管云助力“數(shù)西”發(fā)展持續(xù)提速

    1月22日,信通院發(fā)布《面向東數(shù)西的全棧托管云服務(wù)發(fā)展報告》,曙光全棧托管云作為經(jīng)典案例被廣泛提及。
    的頭像 發(fā)表于 01-23 10:24 ?511次閱讀

    詳細分析力網(wǎng)絡(luò)的發(fā)展

    2023年12月底,由國家發(fā)展改革委、國家數(shù)據(jù)局、中央網(wǎng)信辦、工業(yè)和信息化部、國家能源局五部門聯(lián)合印發(fā)的《關(guān)于深入實施“數(shù)西”工程 加快
    的頭像 發(fā)表于 01-16 10:41 ?547次閱讀
    詳細分析<b class='flag-5'>算</b>力網(wǎng)絡(luò)的發(fā)展

    數(shù)西”工程是什么 “數(shù)西”工程再發(fā)力

    數(shù)西工程是什么?數(shù)西
    的頭像 發(fā)表于 12-27 18:43 ?2291次閱讀

    全國一體化力網(wǎng)絡(luò)國家樞紐節(jié)點(甘肅)慶陽數(shù)據(jù)中心集群 綠色普惠力行動推進大會舉行

    。 副省長陳得信,工業(yè)和信息化部原黨組成員、中央紀委駐工業(yè)和信息化部紀檢組原組長金書波受邀出席會議并講話。市委書記黃澤元主持大會,市委副書記、市長周繼軍作了題為《數(shù)起云涌筑夢慶陽全力打造“數(shù)西
    的頭像 發(fā)表于 12-20 21:55 ?836次閱讀
    全國一體化<b class='flag-5'>算</b>力網(wǎng)絡(luò)國家樞紐節(jié)點(甘肅)慶陽<b class='flag-5'>數(shù)據(jù)</b>中心集群 綠色普惠<b class='flag-5'>算</b>力行動推進大會舉行

    平臺賦能,力共建,智貫東西 “2023 英特爾力大會暨數(shù)西大會”成功舉辦

    近日,以“力共建,智貫東西”為主題的2023 英特爾力大會暨數(shù)西大會在麗江成功舉辦。大會
    的頭像 發(fā)表于 12-08 19:15 ?760次閱讀
    平臺賦能,<b class='flag-5'>算</b>力共建,智貫東西 “2023 英特爾<b class='flag-5'>算</b>力大會暨<b class='flag-5'>東</b><b class='flag-5'>數(shù)</b><b class='flag-5'>西</b><b class='flag-5'>算</b>大會”成功舉辦