小型Hadoop集群的數(shù)據(jù)分層調(diào)度處理算法分析
大小：0.78 MB 人氣： 2017-11-03 需要積分：0
標(biāo)簽：Hadoop(15870)
隨著全球進(jìn)入互聯(lián)網(wǎng)時代，數(shù)據(jù)獲取技術(shù)的不斷發(fā)展帶來數(shù)據(jù)量不斷激增，數(shù)據(jù)的抓取調(diào)度成為關(guān)鍵信息有效采集的重點問題。與此同時，計算機受物理器件性能的限制，為了滿足數(shù)據(jù)處理的要求，MySQL數(shù)據(jù)庫面對的調(diào)度處理的要求也在逐漸提高，僅依靠CPU主頻的提升并不能快速的處理大數(shù)據(jù)帶來的壓力，快速有效的算法成為目前數(shù)據(jù)挖掘的主流。本研究致力于數(shù)據(jù)挖掘分層調(diào)度處理，抓取的目標(biāo)為各數(shù)據(jù)集的維度特征信息，最終設(shè)計并實現(xiàn)一種白配置的Hadoop分布式數(shù)據(jù)調(diào)度算法。因此，為了完成數(shù)據(jù)集分層調(diào)度功能的設(shè)計與實現(xiàn)，本系統(tǒng)主要包括兩大基本模塊：數(shù)據(jù)集的分層模塊和調(diào)度模塊。采用凝聚層次聚類對數(shù)據(jù)集進(jìn)行分層處理，結(jié)合小型Hadoop分布式系統(tǒng)實現(xiàn)數(shù)據(jù)集分層調(diào)度。
非常好我支持^.^
(0) 0%
不好我反對
(0) 0%
下載地址
小型Hadoop集群的數(shù)據(jù)分層調(diào)度處理算法分析下載
相關(guān)電子資料下載
- Hadoop是什么?其核心由兩大部分組成,分別是什么? 1188
- 大數(shù)據(jù)計算框架簡介 1927
- 大數(shù)據(jù)相關(guān)介紹：Hadoop的生態(tài)系統(tǒng)構(gòu)成 1909
- Hadoop大數(shù)據(jù)存算分離方案：計算層無縫對接存儲系統(tǒng) 1011
- 開源“摩爾定律”即將打破《2022開源大數(shù)據(jù)熱力報告》云棲大會上發(fā)布 489
- 如何將Hadoop部署在低廉的硬件上 1331
- Ampere將在2022 Apache Hadoop Meetup上解讀云原生 978
- 基于Hadoop的產(chǎn)品大數(shù)據(jù)分布式存儲優(yōu)化 672
- Hadoop大數(shù)據(jù)“存算分離”，柏科數(shù)據(jù) ISCloud分布式存儲提質(zhì)增效 623
- 如何將Hadoop遷移到云平臺中？ 782