Spark環(huán)境下并行立方體計算方法
大小:0.75 MB 人氣: 2017-12-23 需要積分:2
針對傳統(tǒng)聯(lián)機分析處理( OLAP)處理大數(shù)據(jù)時實時響應(yīng)能力差的問題,研究基于分布式內(nèi)存計算框架Spark加速的數(shù)據(jù)立方體計算方法,設(shè)計基于Spark內(nèi)存集群的自底向上構(gòu)造(BUC)算法-BUCPark,來提高BUC的并行度和大數(shù)據(jù)適應(yīng)能力。在此基礎(chǔ)上,為避免內(nèi)存中迭代的立方體單元膨脹,基于內(nèi)存重復利用和共享的思想設(shè)計改進的BUCPark算法-LBUCPark。實驗結(jié)果表明:LBUCPark算法性能優(yōu)于BUC算法和BUCPark算法,能夠勝任大數(shù)據(jù)背景下的快速數(shù)據(jù)立方體計算任務(wù)。
非常好我支持^.^
(0) 0%
不好我反對
(0) 0%
下載地址
Spark環(huán)境下并行立方體計算方法下載
相關(guān)電子資料下載
- STM32串口通信入門!附通信編程示例 469
- 天數(shù)智芯主導的DeepSpark開源社區(qū)發(fā)布百大應(yīng)用開放平臺24.06版本 436
- spark運行的基本流程 91
- Spark基于DPU的Native引擎算子卸載方案 180
- 嘉興海棠電子:環(huán)保與創(chuàng)新并行的網(wǎng)線行業(yè)領(lǐng)軍者 83
- 百度前高管景鯤與朱凱華創(chuàng)立AI搜索公司,Genspark產(chǎn)品驚艷上線 458
- 精益思維賦能可穿戴設(shè)備:創(chuàng)新與效率并行的未來科技新篇章 122
- 關(guān)于Spark的從0實現(xiàn)30s內(nèi)實時監(jiān)控指標計算 111
- 普渡機器人入駐宜家 為顧客帶來科技與舒適并行的購物方式 449
- 并行連接的SiC MOSFET可以帶來更多電力 501