您好,歡迎來電子發(fā)燒友網(wǎng)! ,新用戶?[免費(fèi)注冊]

您的位置:電子發(fā)燒友網(wǎng)>源碼下載>數(shù)值算法/人工智能>

Spark環(huán)境下并行立方體計算方法

大?。?/span>0.75 MB 人氣: 2017-12-23 需要積分:2

  針對傳統(tǒng)聯(lián)機(jī)分析處理( OLAP)處理大數(shù)據(jù)時實時響應(yīng)能力差的問題,研究基于分布式內(nèi)存計算框架Spark加速的數(shù)據(jù)立方體計算方法,設(shè)計基于Spark內(nèi)存集群的自底向上構(gòu)造(BUC)算法-BUCPark,來提高BUC的并行度和大數(shù)據(jù)適應(yīng)能力。在此基礎(chǔ)上,為避免內(nèi)存中迭代的立方體單元膨脹,基于內(nèi)存重復(fù)利用和共享的思想設(shè)計改進(jìn)的BUCPark算法-LBUCPark。實驗結(jié)果表明:LBUCPark算法性能優(yōu)于BUC算法和BUCPark算法,能夠勝任大數(shù)據(jù)背景下的快速數(shù)據(jù)立方體計算任務(wù)。

Spark環(huán)境下并行立方體計算方法

非常好我支持^.^

(0) 0%

不好我反對

(0) 0%

      發(fā)表評論

      用戶評論
      評價:好評中評差評

      發(fā)表評論,獲取積分! 請遵守相關(guān)規(guī)定!

      ?