區(qū)塊鏈能否保障數(shù)據(jù)庫的安全

大數(shù)據(jù)安全現(xiàn)在已經(jīng)上升成為國家安全極為關鍵的組成部分。最近我們正在這方面做探索，比如與金融界合作，嘗試將分布式數(shù)據(jù)庫與區(qū)塊鏈技術結(jié)合在一起，這意味著可以即時發(fā)現(xiàn)數(shù)據(jù)庫中的數(shù)據(jù)進出狀況，從而真正保障數(shù)據(jù)安全。
　　區(qū)塊鏈應用平臺的風險防范
　　從技術背景看，區(qū)塊鏈基于分布式網(wǎng)絡技術才得以誕生，在金融領域，區(qū)塊鏈就是分布式賬本。分布式賬本總賬的特點，將導致金融交易由凈額交收變成逐筆交收，它可以24小時全天候運轉(zhuǎn)。這使得金融服務可以離開銀行的物理網(wǎng)點直接進入到生活場景。同時也從根本上顛覆改變了金融機構(gòu)的組織結(jié)構(gòu)和業(yè)務結(jié)構(gòu)。因此，現(xiàn)在華爾街的一些金融機構(gòu)已經(jīng)公開宣稱自己其實是一家科技公司。
　　區(qū)塊鏈作為一種分布式數(shù)據(jù)管理技術，受到了越來越多的關注。從金融業(yè)到政府部門、醫(yī)療業(yè)、零售業(yè)乃至新興制造業(yè)，區(qū)塊鏈幾乎成了能夠創(chuàng)造更多價值的神器。但最近基于區(qū)塊鏈技術全球最大眾籌項目The Dao被黑客攻擊，導致價值6000萬美元的360多萬以太幣被劫持，引起業(yè)內(nèi)震動和高度關注。恰恰是該事件，除了反映出區(qū)塊鏈技術整體依然處于測試階段，去中心化的智能合約根本無法避免技術上的操作風險，和主觀上的道德風險等方面問題之外，這個事件最重要的啟示還在于：對區(qū)塊鏈技術應用平臺存在的風險，需建立一套嚴密追蹤規(guī)則，以確保大數(shù)據(jù)應用安全。
　　區(qū)塊鏈技術應用平臺的風險到底如何防范？ The Dao被攻擊事件反映出基于區(qū)塊鏈技術應用平臺的技術風險可能將長期存在。由于區(qū)塊鏈所具有的不可篡改和不可逆性質(zhì)，一旦遭到黑客攻擊，無論是硬分叉還是軟分叉的解決方案，其成本都相當高昂。因此，區(qū)塊鏈技術在金融等場景的應用上，更需要高度關注潛在的風險，而我們擁有的分布式內(nèi)存數(shù)據(jù)庫技術，恰恰可以讓這樣的技術公司幫助制定相應的風控措施和應急預案。
　　在數(shù)字貨幣的發(fā)展中如何突破區(qū)塊鏈的技術障礙？區(qū)塊鏈是國家發(fā)行的加密數(shù)字貨幣的基礎設施，也是其發(fā)行、流通和結(jié)算的技術實施渠道。因此必須建立嚴謹?shù)陌l(fā)展規(guī)劃和設計，盡量找到能使區(qū)塊鏈現(xiàn)有特征得到充分體現(xiàn)并且能突破區(qū)塊鏈發(fā)展障礙的運用案例。而減少“試錯成本”，是區(qū)塊鏈和國家發(fā)行數(shù)字貨幣的重要條件。在這方面，我們的分布式內(nèi)存數(shù)據(jù)庫恰逢其時，能夠在數(shù)據(jù)安全保障方面做出貢獻。
　　分布式結(jié)構(gòu)所具備的技術和經(jīng)濟可行性表明，區(qū)塊鏈技術發(fā)展至今已經(jīng)可以通過構(gòu)建分布式結(jié)構(gòu)體系和參與者共事協(xié)議，形成不需要中心的、大規(guī)模的數(shù)據(jù)庫系統(tǒng)，所有約定的參與者都參與數(shù)據(jù)的記錄和驗證，再通過分布式傳播發(fā)送給各個節(jié)點。即使部分節(jié)點受到攻擊或損害，也不會影響整個數(shù)據(jù)庫的完整性和信息更新，但任意點的變更都會被各個點記錄。
　　分布式聯(lián)盟鏈與計算集群的作用
　　從區(qū)塊鏈技術應用的可行性可以看出，分布式的概念更加貼切準確。中國大型金融機構(gòu)目前已經(jīng)建成超高速、大流量、中心化的信息技術系統(tǒng)，在區(qū)塊鏈技術應用中，各金融機構(gòu)共同組建分布式的聯(lián)盟鏈，充分利用現(xiàn)有技術，可確保交易速度，實現(xiàn)合規(guī)控制的目的。
　　數(shù)據(jù)可能會泄露，也可能會透過某種方式滲透進入網(wǎng)絡，可以通過排序、機器學習，通過人工干預的半監(jiān)督學習、深度學習，拼湊出某種完整圖景，以探索出并固定住某種經(jīng)驗。人類過去從沒做到這一點。機器累積的這種認知能力，將大為提升人類使用知識的能力。
　　中國大陸做分布式數(shù)據(jù)庫的人很少，而做內(nèi)存式數(shù)據(jù)庫的幾乎根本就沒有。上世紀90年代中期以后，中國大陸數(shù)據(jù)庫行業(yè)一直為美、德等國外廠商所壟斷。當時中國本土眾多軟件公司所追求的，可能更多的是短期效益，而不愿掙數(shù)據(jù)庫這樣的慢錢。再加上數(shù)據(jù)庫本身技術標準嚴苛，對算法穩(wěn)定性要求很高，實現(xiàn)難度較大，是一種慢工出細活的領域，中國公司如果起步晚，積累少，在當時肯定就會顯得落后，所以這種支撐大數(shù)據(jù)核心發(fā)展的基礎技術真的需要國家的大力支持。
　　兩年前我即開始啟動流數(shù)據(jù)庫研究，那時國內(nèi)還沒有人提這項研究。因為時勢都未到，但它所發(fā)生的必要條件均已具備。所以當我們做出這個數(shù)據(jù)庫后，今后將要充分發(fā)揮這些必要條件。中美專家包括中國工信部專家都對流數(shù)據(jù)庫在中國國內(nèi)出現(xiàn)感到驚訝。我們柏睿數(shù)據(jù)撰寫的數(shù)據(jù)庫標準已被國際信息標準化委員會通過，成為國際認定的中國國家級標準，受到國內(nèi)外同行的充分肯定。同時，國家也在根據(jù)這一國際標準制定國家標準，我們國家現(xiàn)在國際大數(shù)據(jù)標準領域已經(jīng)擁有自己的發(fā)言權，美德日一統(tǒng)標準的時代已徹底成為了過去式。
　　下一代軟件開發(fā)技術趨勢可能會有很大變化。并行計算今后可能會要求很高，這其實也是我們正在做的事情之一。但對有些概念，國內(nèi)存在混淆現(xiàn)象。比如我一直堅持說MPP內(nèi)存數(shù)據(jù)庫，有的人卻說這是分布式數(shù)據(jù)庫。其實MPP也是一種分布式，而原則上，MPP是海量并行處理，算是一種分布式，但分布式并不見得是MPP。所謂并行處理是說每個處理單元與其它單元有關聯(lián)。最近兩年，并行計算確實出現(xiàn)了一些語言或軟件開發(fā)方法，這一趨勢比較明顯。尤其是當處理的數(shù)據(jù)量很多，則對之后的影響會很大。這方面，國內(nèi)積累真的不多。
　　3年前，我曾認為，理想中一個分布式的MPP海量并行的內(nèi)存數(shù)據(jù)庫就已足夠，我能處理的數(shù)據(jù)，比如說當時是64G內(nèi)存有100個節(jié)點6個T的數(shù)據(jù)，就讓我覺得很大了。但去年很多用戶已開始問我，你們能不能處理256G內(nèi)存的單節(jié)點數(shù)據(jù)。這個發(fā)展真是太快了。
　　下一個趨勢是，單節(jié)點可能至少要處理4個T的數(shù)據(jù)，4個T1000個節(jié)點就是4000T。在做好算法，系統(tǒng)穩(wěn)定的條件下，4個T數(shù)據(jù)可在數(shù)分鐘之內(nèi)處理完畢。這是一個比較漂亮的結(jié)果。就硬件而言，CPU自身速度在提高。而分布式計算集群現(xiàn)在越來越大。這在之前是很難預料的。
　　我們的內(nèi)存數(shù)據(jù)庫內(nèi)部測試現(xiàn)在已達到256個節(jié)點，下一步可能是512個節(jié)點，這是數(shù)據(jù)庫一個比較大的變化趨勢。3年前我開始考慮的流數(shù)據(jù)庫，去年這一想法已開始成熟，原以為可能要等候兩三年才能出成果?，F(xiàn)在看，如果每個人手中的手機云端數(shù)據(jù)直接進入我的有數(shù)百臺機器組成的內(nèi)存池子，進入流數(shù)據(jù)庫，做一些簡單查詢，或進入分布數(shù)據(jù)庫做非常復雜的分布查詢，這些過程都無需落地，只在內(nèi)存里跑。這是一個比較完整的體系。之后，是深度學習的算法，也存于內(nèi)存之中，而且要與數(shù)據(jù)庫緊密結(jié)合。也就是說，在只要有數(shù)據(jù)的地方，就有算法圍繞著它。今后朝著這個方向才是大數(shù)據(jù)發(fā)展的必然趨勢。
　　區(qū)塊鏈大數(shù)據(jù)安全應用關涉國家戰(zhàn)略
　　從區(qū)塊鏈所具有的分布式功能也可以看出，通過構(gòu)建分布式數(shù)據(jù)庫系統(tǒng)和參與者共識協(xié)議，能夠保護數(shù)據(jù)的完整性。而區(qū)塊鏈的時間戳功能，可以通過生成一定時間段的信息區(qū)塊以及區(qū)塊之間的首尾相連數(shù)據(jù)鏈，形成不可偽造的數(shù)據(jù)。當每個參與者進入?yún)^(qū)塊時加蓋時間戳，就能夠證明原創(chuàng)性和所有權歸屬，這必然有利于保護信息的私密性。因為無論誰動過你的奶酪，都會留下痕跡，動你奶酪的人必然會謹慎對待。
　　雖然區(qū)塊鏈技術應用目前還處于實驗室階段，但人們已經(jīng)迫不及待地希望區(qū)塊鏈技術能夠提供某種安全保證，以便將復雜的經(jīng)濟生活變得簡單易行。比如便捷支付，比如在醫(yī)療保健等各種社會服務領域應用區(qū)塊鏈技術，可以提高效率，節(jié)約成本。盡管區(qū)塊鏈技術應用的潛在風險開始暴露，但與此同時，對區(qū)塊鏈技術應用風險的管控也越來越受到重視。
　　從移動互聯(lián)網(wǎng)到大數(shù)據(jù)、區(qū)塊鏈，當今時代，技術變化的潮流勢不可擋，以至于很多人一時竟難以明白和適應。但毫無疑問，區(qū)塊鏈正在讓大數(shù)據(jù)洶涌而來。區(qū)塊鏈的可信任性、安全性和不可篡改性，正在讓更多數(shù)據(jù)被釋放出來。
　　我們看到，數(shù)據(jù)的“看過、復制即被擁有”等特征，曾經(jīng)嚴重阻礙數(shù)據(jù)流通。但基于去中心化的區(qū)塊鏈，卻能夠破除數(shù)據(jù)被任意復制的威脅，從而保障數(shù)據(jù)擁有者的合法權益。區(qū)塊鏈還提供了可追溯路徑，能有效破解數(shù)據(jù)確權難題。有了區(qū)塊鏈提供安全保障，大數(shù)據(jù)將更加活躍涌動。
　　大數(shù)據(jù)時代的來臨，為眾多企業(yè)帶來了全新的機遇和挑戰(zhàn)。隨著數(shù)據(jù)量、數(shù)據(jù)種類的增多，企業(yè)由歷史數(shù)據(jù)分析漸漸過渡到基于多源、海量數(shù)據(jù)的實時分析。我們都知道商場如戰(zhàn)場，誰能在企業(yè)運營中做出快速、高效的分析決策，誰就能日益激烈的市場競爭中立于不敗之地。RDP通過提供從海量數(shù)據(jù)存儲、分布式內(nèi)存計算、分布式內(nèi)存數(shù)據(jù)庫、內(nèi)存數(shù)據(jù)分析挖掘以及數(shù)據(jù)可視化的整套支持，解決了企業(yè)在大數(shù)據(jù)和快數(shù)據(jù)存儲、分析、挖掘領域碰到的各種問題。作為企業(yè)級解決方案，可管理性是RDP的顯著優(yōu)勢，用戶友好的管理界面提供了系統(tǒng)安裝、系統(tǒng)及集群配置、監(jiān)控及預警等多方面的一站式支持。RDP架構(gòu)具有高可用性和快速故障恢復能力，HDFS2作為其底層數(shù)據(jù)持久化存儲系統(tǒng)的支撐技術保證了數(shù)據(jù)的持久化和冗余復制，并具有數(shù)據(jù)自動檢測和修復的容錯功能；強大、高效的內(nèi)存數(shù)據(jù)庫復制、持久化功能，保證內(nèi)存數(shù)據(jù)安全可靠。在安全領域，與Kerberos/LDAP進行整合，支持細粒度訪問控制、應用程序安全及數(shù)據(jù)加密及解密等等。
　　當今從事大數(shù)據(jù)應用者很多，也有很多從事大數(shù)據(jù)交易的企業(yè)，如果能形成合力，整個大數(shù)據(jù)生態(tài)系統(tǒng)能夠良性循環(huán)，將是一件令人樂觀的前景，也將會為中國大數(shù)據(jù)應用發(fā)展積累經(jīng)驗和人才。因此，政府需要在這方面積極加以引導。大數(shù)據(jù)應用不應只是一種熱潮，因為當熱潮散去，還會留下什么呢？如果形成生態(tài)系統(tǒng)，在數(shù)據(jù)庫和數(shù)據(jù)處理方面，包括中間件方面，也可能存在基礎軟件換代升級的問題要解決，以現(xiàn)有技術發(fā)展趨勢，而這很可能使中國出現(xiàn)一些大的基礎軟件公司，與甲骨文公司、SAP公司等國際巨頭競爭。大家拭目以待！
?