華為云存儲技術(shù)將成就不凡微秒時代

在云計(jì)算的世界里,如果云廠商有能力將服務(wù)水平提升一個等級,則意味著在未來一段時間里,將具備差異化競爭力,也很容易在市場中形成獨(dú)樹一幟的優(yōu)勢。

華為云存儲就在云計(jì)算基礎(chǔ)服務(wù)領(lǐng)域中干著這樣一件事情。近日,在“成都·選擇不凡-華為云城市峰會2019”上,華為云正式發(fā)布存儲All-Flash戰(zhàn)略,并推出戰(zhàn)略落地的首款產(chǎn)品——全新一代極速IO云硬盤,這標(biāo)志著華為云在存儲這項(xiàng)基礎(chǔ)云服務(wù)上實(shí)現(xiàn)了大幅的性能提升,率先引領(lǐng)云上存儲從毫秒進(jìn)入到微秒時代。在華為云看來,以Flash介質(zhì)替代HDD、數(shù)據(jù)處理從毫秒進(jìn)入到微秒,背后是存儲架構(gòu)、芯片、算法等一系列技術(shù)的重構(gòu)與突破。

華為云之所以如此果敢地率先選擇全面擁抱Flash,乃是時勢所趨。在5G、IoT以及AI等技術(shù)快速崛起以及技術(shù)疊加效應(yīng)日趨突顯之際,市場大幅推動了應(yīng)用對于實(shí)時性的需求。因此,云服務(wù)提供商必須要具備提供更低時延、更大帶寬的數(shù)據(jù)基礎(chǔ)存取能力,并以智能化的方式去幫助用戶挖掘數(shù)據(jù)價值。

“5G時代,瓶頸將不再是廣域網(wǎng)?！?G帶來的不僅僅是傳輸帶寬和速率的大幅提升,更會對云、邊、端進(jìn)行全面的重構(gòu)。隨著傳輸帶寬和速度實(shí)現(xiàn)質(zhì)的飛躍,像AR/VR、自動駕駛、人臉識別等應(yīng)用會大量出現(xiàn),隨之而來的數(shù)據(jù)洪流以及數(shù)據(jù)處理則對時延提出了進(jìn)一步的需求。

首先,Flash的成本正在持續(xù)下降。根據(jù)知名市場調(diào)研公司TrendFocus的數(shù)據(jù)顯示,今年一季度硬盤貨量同比下滑13%,而SSD 每GB的成本則是持續(xù)下降?！斑@么多年過去了,機(jī)械硬盤的時延始終還是4毫秒,我們必須用新一代技術(shù)去降低時延?！睆堄铌勘硎?“用Flash逐步代替機(jī)械硬盤是大勢所趨,從業(yè)界的報告來看,今年全球Flash無論是從容量、收入都將超過機(jī)械硬盤。

Flash自身的發(fā)展趨勢也是容量越來越大、成本越來越低。因此,在未來的云中,Flash將會占據(jù)絕大部分存儲介質(zhì)?！?/p>

為此,華為云打造出全新一代智能數(shù)據(jù)底座來實(shí)現(xiàn)All-Flash戰(zhàn)略,滿足各類新興應(yīng)用對數(shù)據(jù)實(shí)時性的訴求,引領(lǐng)云上存儲從毫秒走向微秒時代。華為云的智能數(shù)據(jù)底座包括引擎、架構(gòu)、芯片、算法和AI五個部分,概括起來即為“兩個創(chuàng)新+三個加持”?！皟蓚€創(chuàng)新”為全新Flash-Native存儲引擎和全棧架構(gòu)創(chuàng)新,而“三個加持”則是全系列自研芯片、硬核數(shù)學(xué)算法以及AI加持。

據(jù)介紹,全新Flash-Native存儲引擎完全為Flash而設(shè)計(jì),針對Flash本身具有擦除壽命、不支持覆蓋寫等限制,Flash-Native存儲引擎采用Flash友好的數(shù)據(jù)布局,可提升Flash壽命5倍以上,數(shù)據(jù)持久性高達(dá)11個9。Flash-Native存儲引擎還可支持不同負(fù)載的應(yīng)用,充分發(fā)揮了多核調(diào)度優(yōu)勢并保證數(shù)據(jù)讀寫路徑最優(yōu),帶來低于百微秒的時延與百倍以上并發(fā)訪問性能的提升。

而全新的全棧架構(gòu)則可以讓Flash發(fā)揮極致性能和效能,通過全棧架構(gòu)創(chuàng)新實(shí)現(xiàn)數(shù)據(jù)IO與控制分離,讓芯片重構(gòu)數(shù)據(jù)讀寫,讓軟件實(shí)現(xiàn)智能調(diào)度,使得IO路徑最短,時延最低。數(shù)據(jù)中心層面,通過優(yōu)化的極簡扁平網(wǎng)絡(luò),實(shí)現(xiàn)1:1無阻塞、無收斂比網(wǎng)絡(luò);并通過如液冷技術(shù)、AI控溫、模塊化數(shù)據(jù)中心等來進(jìn)一步減少能耗,踐行綠色環(huán)保。

“三個加持”首先體現(xiàn)在華為云可以充分利用全系列自研芯片的優(yōu)勢,從“算、傳、存、智”四個維度,對IO路徑和數(shù)據(jù)處理的全流程進(jìn)行緊密配合,實(shí)現(xiàn)全棧深度定制優(yōu)化。其次,華為云存儲還融入了多項(xiàng)核心自研算法,將存儲寫帶寬與數(shù)據(jù)重構(gòu)帶寬提升數(shù)倍的同時,通過自適應(yīng)差量壓縮算法將數(shù)據(jù)壓縮率提升3倍,并可大幅降低網(wǎng)絡(luò)擁塞發(fā)生概率,長尾時延降低30%,時延穩(wěn)定性更優(yōu)。最后,華為云還將人工智能技術(shù)融入分布式存儲的全生命周期,智能識別用戶業(yè)務(wù)模型,實(shí)現(xiàn)存儲平臺的自主調(diào)優(yōu)和自我進(jìn)化,讓應(yīng)用“越用越快”。

可以說,華為云智能數(shù)據(jù)底座就是引擎、架構(gòu)、芯片、算法、AI等多項(xiàng)技術(shù)融合的成果。目前,華為云是業(yè)界為數(shù)不多有能力將多項(xiàng)技術(shù)進(jìn)行整合與優(yōu)化,從而來提升整體服務(wù)水平的云服務(wù)提供商,其通過全棧技術(shù)能力,將所有環(huán)節(jié)進(jìn)行協(xié)同優(yōu)化,最終為用戶呈現(xiàn)出最佳的云服務(wù)。

這一次,華為云通過存儲All-Flash戰(zhàn)略,明確了以“全閃存、全系列、+智能、全棧創(chuàng)新”為導(dǎo)向的戰(zhàn)略布局,并且將讓塊、文件、對象存儲逐步完成全閃存進(jìn)化。在本次峰會上,華為云發(fā)布的全新一代極速IO云硬盤值得一說。回顧云計(jì)算市場的發(fā)展歷史,云服務(wù)提供商們需要不斷通過技術(shù)創(chuàng)新和投入來實(shí)現(xiàn)更加出色和高性價比的云服務(wù),進(jìn)而實(shí)現(xiàn)規(guī)模效應(yīng),以換取自身的成本優(yōu)勢,這背后是一場技術(shù)與服務(wù)能力的長期價值比拼。

當(dāng)前正處于從毫秒進(jìn)入微秒時代的時間拐點(diǎn),華為云率先擁抱全閃存,是一次引擎、架構(gòu)、芯片、算法、AI層面的全面革新。這意味著華為云將存儲這項(xiàng)基礎(chǔ)云服務(wù)率先提升了一個等級,也意味著華為云可以為用戶提供更加極致性能與體驗(yàn)的云存儲服務(wù),成就一個不凡的微秒時代!