打造華為“最強(qiáng)大腦”

深圳，坂田。
冬日清晨的陽光，透過綠意盎然的樹梢照在Ｃ區(qū)數(shù)據(jù)中心，一切很安靜。成千上萬臺設(shè)備穩(wěn)健運轉(zhuǎn)著，如同華為一顆跳動的心臟，用信息流連接并協(xié)同全球一百多個代表處７*24小時全球化業(yè)務(wù)的運作。這背后是一群默默支撐和堅守的華為IT人。

財報！財報！
10月1日國慶，22:30，A10，IT保障團(tuán)隊辦公區(qū)燈火通明，財報支持組的十多位同事正在為季度財報的輸出緊張忙碌著。一份財報到底要處理多少數(shù)據(jù)？團(tuán)隊中曾有人做過一個有趣的測算，如果A4紙每頁厚度為0.09mm，將季報處理的數(shù)據(jù)用Ａ4紙打印，即使是雙面打印其高度也有1萬7千多千米，這接近2000座珠穆朗瑪峰的高度！本季報首次基于華為自產(chǎn)一體機(jī)承載，如此龐大的數(shù)據(jù)量對一體機(jī)運行是極為嚴(yán)峻的考驗。大家充滿了緊張與期待。
應(yīng)用支持工程師周立平緊盯著電腦屏幕，上面不停滾動刷新著監(jiān)控數(shù)據(jù)。不同IT系統(tǒng)中的數(shù)據(jù)流，就像小溪匯入江河湖海一樣，快速匯聚到華為數(shù)據(jù)中心的財報系統(tǒng)，最后形成薄薄幾頁紙的財報。50GB/s，60GB/s，70GB/s……隨著信息洪峰的到來，財報平臺的數(shù)據(jù)量逐步增長，接近警戒值。
突然，一個報警郵件發(fā)來：某子公司存貨減值變動XX億。怎么這么大的差異？已經(jīng)連續(xù)奮戰(zhàn)了14個小時的周立平不敢有一絲懈怠，馬上通過eSpace組織在線會議，保障團(tuán)隊中十幾年支持經(jīng)驗的耿成江、和數(shù)據(jù)庫一體機(jī)朝夕相處的廖汐汶、深入了解業(yè)務(wù)邏輯的孫建華等迅速加入，一隊人馬兵分三路：問題定位、規(guī)避方案、資源協(xié)調(diào)。不到片刻，問題定位組便確認(rèn)了底層平臺無異常，是數(shù)據(jù)處理邏輯出現(xiàn)問題。
10月2日凌晨1:50，問題終于解決。周立平臉上洋溢出勝利的喜悅，eSpace群組里的戰(zhàn)友們也紛紛冒泡點贊！
10月6日8:00，一條短信出現(xiàn)在她的手機(jī)上：Q3季報順利輸出，訂單量增長35%，系統(tǒng)零故障……謝謝大家支持！周立平長舒一口氣：華為一體機(jī)爭氣啦，比計劃提前了一天時間，還有兩天假期，終于可以在家好好陪陪寶寶了… …

穩(wěn)定？效率？
10月24日，成研A1食堂廣場。WIFI接入、AnyOffice、云盤、手機(jī)W3、手機(jī)eSpace、移動審批、測試移動化…… “有了研發(fā)IT2.0，在家辦公、測試、與會統(tǒng)統(tǒng)不是夢！”IT人員向來往的同事熱情地推介。
然而，這邊在宣傳研發(fā)IT2.0的夢想，另一邊，存儲卻出問題了——2周內(nèi)故障反復(fù)爆發(fā)，導(dǎo)致2次服務(wù)癱瘓。
存儲系統(tǒng)工程師張帆緊鎖眉頭，梳理解決方案的每一個細(xì)節(jié)。研發(fā)辦公應(yīng)用基于桌面云、計算云的支撐，資源共享越大，效率越高。IT聯(lián)合產(chǎn)品線設(shè)計實施“超大存儲資源池”的試點方案，但超大存儲資源池受瞬時大流量沖擊出現(xiàn)大面積癱瘓。要效率，還是要穩(wěn)定？存儲解決方案到底該如何優(yōu)化？
張帆試圖找到一個兩全之策。他找到存儲建設(shè)和運維方面資深工程師吳家漢、汪自強(qiáng)，充分聽取了他們的建議，又和產(chǎn)品線同事反復(fù)討論，分析細(xì)節(jié)：超大資源池相當(dāng)于“把雞蛋放到一個籃子里”，風(fēng)險太過集中。最后大家決定參考“故障隔離、快速降級”的互聯(lián)網(wǎng)架構(gòu)，建立“雞蛋分籃”的小資源池方案，即使一戶出現(xiàn)問題，其他用戶可確保正常運作，影響被控制在最小范圍。兵貴神速，當(dāng)成研路演隊伍剛返回深圳，存儲方案優(yōu)化已完成，并迅速實施?；谛逝c穩(wěn)定的優(yōu)化方案成為后續(xù)IT2.0項目順利推行的保障。截至目前，華為內(nèi)部IT網(wǎng)絡(luò)提供了800+應(yīng)用，已上線20萬虛擬機(jī)（桌面云10萬，計算云10萬），全球帶寬總?cè)萘窟_(dá)到58Gbps，全球的存儲容量超過60PB。
問題解決了，張帆在記事本上寫下這樣一句話：“技術(shù)也有博弈，有時候最好的方法并非做到某一方面的極致，而是在諸多方面中找到一個制衡點！”

IT系統(tǒng)雙活
春節(jié)IT容災(zāi)演練后，信息技術(shù)工程部便決定策劃和實施IT關(guān)鍵系統(tǒng)雙活改造。系統(tǒng)雙活指業(yè)務(wù)系統(tǒng)在兩套系統(tǒng)上同時運行，兩套系統(tǒng)通常部署在不同的數(shù)據(jù)中心，當(dāng)某套系統(tǒng)出現(xiàn)問題時，另一套系統(tǒng)仍不間斷地提供服務(wù)。如果成功，將使系統(tǒng)應(yīng)用的可用性提升10倍以上，提升業(yè)務(wù)連續(xù)性保障水平。
如果把華為的IT產(chǎn)品看成一個個棋子，那么IT系統(tǒng)雙活就相當(dāng)于布局一盤大棋。由IT七級專家劉明榮牽頭，開始新一輪緊鑼密鼓的奮戰(zhàn)。面對這個挑戰(zhàn)，老劉還是有信心的，他在數(shù)據(jù)中心摸爬滾打了17年，還有精通數(shù)據(jù)庫且熟悉業(yè)界雙活方案的蘇燕強(qiáng)、對軟件包功能特性了如指掌的熊建湘、全面掌握Web平臺架構(gòu)的鄭學(xué)文、熟悉公司自產(chǎn)產(chǎn)品又清楚應(yīng)用場景的陳紹元等強(qiáng)強(qiáng)聯(lián)手的兄弟連。從方案探討、測試、論證到試點、上線，系統(tǒng)團(tuán)隊奮戰(zhàn)了整整９個月，梳理了12個關(guān)鍵源系統(tǒng)與上百個周邊系統(tǒng)千絲萬縷的聯(lián)系，完成了鏡像系統(tǒng)的架構(gòu)設(shè)計，采取集成驗證、分批上線的策略，在系統(tǒng)正式啟動雙活前做好了充分準(zhǔn)備。
11月， IT系統(tǒng)雙活進(jìn)入倒計時：源系統(tǒng)退出，鏡像系統(tǒng)穩(wěn)健地承載了業(yè)務(wù)運行！關(guān)鍵業(yè)務(wù)悄無聲息的改變運行狀態(tài)：系統(tǒng)雙活運行成功！老劉和他的兄弟連開心地笑了，這9個月來辛苦付出都在這一瞬間仿佛得到了最好的獎賞。因華為IT率先在業(yè)界取得突破，不僅再一次證明了華為IT從應(yīng)用軟件到網(wǎng)絡(luò)、存儲、計算等系統(tǒng)平臺的綜合解決方案實力，也將更穩(wěn)定、高效支撐華為全球業(yè)務(wù)連續(xù)運營。

陽光下華為數(shù)據(jù)中心，靜靜佇立。這個全球業(yè)務(wù)復(fù)雜性最高的專業(yè)平臺，培育了一批批勇于追夢的IT人，以安全、穩(wěn)定、高效的運作支撐了公司的業(yè)務(wù)發(fā)展；它又像是全球最大的一塊試驗田，無數(shù)華為自產(chǎn)產(chǎn)品正在這里孵化、催熟、走向卓越，插上夢想的翅膀飛向全世界！