HPC技術(shù)對社會發(fā)展有什么深遠影響

人類第一次完整全基因組的測序花了13年，在新技術(shù)的加持下，這個時間已經(jīng)降低到1天以內(nèi)；沒有這項新技術(shù)加持，電影《阿凡達》的渲染可能需要上萬年；這項新技術(shù)還讓新藥的研發(fā)周期大幅縮短，讓衛(wèi)星遙感定位精度大大提升——這項技術(shù)就是高性能計算HPC。

那么到底什么是HPC，這項技術(shù)對社會發(fā)展有什么深遠影響，答案盡在本期鵬友會客廳。

數(shù)據(jù)存儲承擔(dān)

文明傳承、生產(chǎn)生活改善、科技

創(chuàng)新三大重任

在數(shù)字化時代，數(shù)據(jù)存儲是政企運行的生命線，更是國之重器：通過文物數(shù)字化保護，大量珍貴的遺跡以圖片、視頻、VR等數(shù)字化形式保存了下來，讓文明得以傳承；另外，存儲對生產(chǎn)生活改善、科技創(chuàng)新方面的影響更加廣泛，尤其是科技創(chuàng)新領(lǐng)域，現(xiàn)在已經(jīng)成為國家和企業(yè)間競相角逐的戰(zhàn)略高地。

HPC與大數(shù)據(jù)/AI結(jié)合快速增長

HPC產(chǎn)業(yè)走向數(shù)據(jù)密集型

HPC誕生的前半個世紀，其發(fā)展核心矛盾在于計算，也就是我們所說的“計算密集型”HPC。隨著技術(shù)發(fā)展及高性能數(shù)據(jù)分析的出現(xiàn)，數(shù)據(jù)量越來越大，數(shù)據(jù)重要性越來越高，HPC開始迎來“數(shù)據(jù)密集型”的新發(fā)展階段。

沒有高性能計算的加持，阿凡達的渲染可能需要上萬年，而隨著電影畫幅和體驗的提升，渲染量還會進一步增加，如2019年上映的《阿麗塔：戰(zhàn)斗天使》，它的渲染量就是阿凡達的三倍。

同樣的數(shù)據(jù)變化也發(fā)生在HPC領(lǐng)域的其他場景：

新藥研發(fā)領(lǐng)域：借助HPC可以加速藥物篩選和分子分析，使新藥的研發(fā)周期大幅縮短，如面對當(dāng)前嚴重的疫情，更多的樣本集、更快的數(shù)據(jù)提煉，可以更快的研發(fā)生產(chǎn)出疫苗；

新車研發(fā)領(lǐng)域：隨著近年來自動駕駛的興起，新車研發(fā)利用HPC進行自動駕駛的車輛測試。上百臺的測試車輛，每臺測試車路測時長達2000小時左右，單輛測試車路測采集數(shù)據(jù)量最高可達64TB/天，通過HPC實現(xiàn)車輛碰撞的技術(shù)仿真，大幅降低了研發(fā)費用和周期；

能源勘探領(lǐng)域：利用高性能計算（HPC）技術(shù)，對地震勘探數(shù)據(jù)進行加工、計算，為能源勘探提供直觀的、可靠的依據(jù)。隨著勘探技術(shù)的進步，地震數(shù)據(jù)實現(xiàn)了從二維到三維的轉(zhuǎn)變，并且逐步向四維演進，數(shù)據(jù)量也向PB規(guī)模發(fā)展，中間過程數(shù)據(jù)的增加高達10~20倍，加上歷史資料的長期保存，整體數(shù)據(jù)量成幾十倍增長，呈現(xiàn)出數(shù)據(jù)密集型的特征；

衛(wèi)星遙感領(lǐng)域：隨著大數(shù)據(jù)、AI等新技術(shù)在衛(wèi)星遙感領(lǐng)域的應(yīng)用，衛(wèi)星遙感領(lǐng)域數(shù)據(jù)量增長了近70倍，衛(wèi)星遙感的定位精度由以前的70米提升到了2米。

“數(shù)據(jù)密集型”HPC發(fā)展核心在于數(shù)據(jù)，

存儲扮演著更重要的角色

新的高性能計算應(yīng)用不斷涌現(xiàn)，驅(qū)動了數(shù)據(jù)密集型HPC的高速發(fā)展，我們也稱為高性能數(shù)據(jù)分析（HPDA）。比如當(dāng)下炙手可熱的自動駕駛，新車的研發(fā)需要對上百PB的數(shù)據(jù)進行訓(xùn)練和仿真，對于存儲的性能、穩(wěn)定性、安全性等都提出了新的挑戰(zhàn)，存儲更成為了鏈接計算、網(wǎng)絡(luò)的核心基礎(chǔ)設(shè)施。

政府應(yīng)對“數(shù)據(jù)密集型”HPC趨勢

從超算向智算平臺演進，以數(shù)據(jù)為中心

牽引算力和存力均衡發(fā)展

政府在高性能計算/超算領(lǐng)域，一直扮演著舉足輕重的作用，可以通過公共力量，快速、規(guī)?；七M民生和經(jīng)濟發(fā)展。作為新基建的重要組成部分，各地紛紛上馬超算國家中心/區(qū)域中心，然而，超算中心的建設(shè)確有一些偏科，呈現(xiàn)出了重建設(shè)輕應(yīng)用、重計算輕數(shù)據(jù)的特點，造成了一些資源的閑置與浪費。

面向未來，我們認為加快數(shù)據(jù)密集型超算的建設(shè)會成為主要的方向，包括從超算向智算平臺的演進，用人工智能、大數(shù)據(jù)等新應(yīng)用生態(tài)加持超算中心，實現(xiàn)以數(shù)據(jù)為中心牽引采、存、算、傳、用等多維度的均衡發(fā)展。

企業(yè)應(yīng)對“數(shù)據(jù)密集型”HPC趨勢

建設(shè)數(shù)據(jù)湖，使用專業(yè)的存儲設(shè)備，

關(guān)注前沿科技

當(dāng)前，對于企業(yè)來講，數(shù)據(jù)的價值已經(jīng)得到了充分的認識，企業(yè)也愿意更多、更久的保存數(shù)據(jù)，而數(shù)據(jù)量也實現(xiàn)了從PB向EB級的跨越。想象一下，企業(yè)消耗巨額成本獲取的車輛路測數(shù)據(jù)、地震資料、粒子碰撞數(shù)據(jù)等一旦丟失，損失將是難以估量的，并且在長周期的數(shù)據(jù)分析過程中，任何的存儲故障，都可能導(dǎo)致分析過程的前功盡棄。

面對海量數(shù)據(jù)，企業(yè)在存儲選型上，應(yīng)更加關(guān)注存儲性能、關(guān)注存儲本身的數(shù)據(jù)處理能力，以及AI應(yīng)用結(jié)合、大數(shù)據(jù)等一些前沿科技發(fā)展，從一開始就樹立數(shù)據(jù)湖的意識，讓數(shù)據(jù)應(yīng)存盡存、高效共享：

高密硬件架構(gòu)、重刪壓縮、高效冗余算法、熱溫冷分級機制，以及藍光介質(zhì)等，這些非常好的技術(shù)手段能讓海量數(shù)據(jù)更加經(jīng)濟、高效、安全的存儲；人工智能/大數(shù)據(jù)技術(shù)的加持，能對更長遠的數(shù)據(jù)進行分析，獲得更準(zhǔn)確、更有價值的分析結(jié)果。

華為OceanStor Pacific下一代

高性能數(shù)據(jù)分析（HPDA）存儲

加速HPC向數(shù)據(jù)密集型演進

華為OceanStor Pacific系列下一代高性能數(shù)據(jù)分析（HPDA）存儲，可以高效應(yīng)對HPC產(chǎn)業(yè)向數(shù)據(jù)密集型升級的關(guān)鍵挑戰(zhàn)：

超高密設(shè)計：通過系列化高密硬件和智能數(shù)據(jù)分級能力，實現(xiàn)成本優(yōu)化，數(shù)據(jù)存得多、存得??；

面向混合負載：一套存儲同時支持高帶寬和高IOPS，應(yīng)對復(fù)雜負載；

多協(xié)議互通：文件/大數(shù)據(jù)/對象多協(xié)議互通，讓不同應(yīng)用的承載更高效。

作為HPC產(chǎn)業(yè)的重要數(shù)據(jù)底座，高性能數(shù)據(jù)分析存儲在探索知識邊界、服務(wù)國計民生、加速商業(yè)變現(xiàn)等領(lǐng)域發(fā)揮著著重要的作用。華為OceanStor Pacific下一代高性能數(shù)據(jù)分析（HPDA）存儲，以超高密設(shè)計、面向混合負載、多協(xié)議互通，全面加速HPC向數(shù)據(jù)密集型演進。目前已經(jīng)成功應(yīng)用于自動駕駛、基因測序、氣象預(yù)測、衛(wèi)星遙感等眾多國內(nèi)外高性能計算場景企業(yè)及機構(gòu)。

原文標(biāo)題：為何新藥研發(fā)、基因測序、衛(wèi)星遙感的發(fā)展提速都需要它？

文章出處：【微信公眾號：華為】歡迎添加關(guān)注！文章轉(zhuǎn)載請注明出處。

責(zé)任編輯：haq