資料介紹
隨著基于Hadoop平臺的大數據技術的不斷發展和實踐的深入,Hadoop YARN資源調度策略在異構集群中的不適用性越發明顯。一方面,節點資源無法動態分配,導致優勢節點的計算資源浪費、系統性能沒有充分發揮;另一方面,現有的靜態資源分配策略未考慮作業在不同執行階段的差異,易產生大量資源碎片。基于以上問題,提出了一種負載自適應調度策略。監控集群執行節點和提交作業的性能信息,利用實時監控數據建模、量化節點的綜合計算能力,結合節點和作業的性能信息在調度器上啟動基于相似度評估的動態資源調度方案。優化后的系統能夠有效識別集群節點的執行能力差異,并根據作業任務的實時需求進行細粒度的動態資源調度,在完善YARN現有調度語義的同時,可作為子級資源調度方案架構在上層調度器下。在Hadoop 2.O上實現并測試該策略,實驗結果表明,作業的自適應資源調度策略顯著提高了資源利用率,集群并發度提高了2到3倍,時間性能提升了近10%。
- 自適應反饋消除 3
- 基于橋式吊車系統的分組自適應控制策略 22次下載
- 一種基于自適應鄰域策略的改進算法 10次下載
- 異構環境下的多DAG任務調度算法綜述 13次下載
- 面向異構領域自適應的聯合信息保持算法 5次下載
- 基于節點分布自適應的WSN覆蓋控制優化策略 25次下載
- 總線負載的自適應頻率調節 2次下載
- 自適應元數據服務負載均衡策略 0次下載
- 一種新的調度策略優化Spark在異構集群下表現 0次下載
- 基于Ubuntu的Hadoop集群安裝與配置 8次下載
- 異構集群服務器的動態加權負載均衡算法
- 基于有限反饋的數據流數自適應SDMA
- 基于反饋的帶寬自適應無線監控系統
- 結構化P2P自適應混合負載均衡策略
- 樹型網格計算環境下的自適應任務調度算法
- 虛擬機:Hadoop集群的配置 2689次閱讀
- 虛擬機:Hadoop集群的搭建 3097次閱讀
- 工業機器人自適應運動控制技術 1943次閱讀
- 汽車開關的關鍵技術自適應觸覺的詳細介紹 2016次閱讀
- 什么是Hadoop? Spark和Hadoop對比 6751次閱讀
- 自適應控制的優缺點_自適應控制存在的問題及發展 4.9w次閱讀
- 什么是自適應控制_自適應控制基本原理 5.5w次閱讀
- hadoop云存儲解決方案 6442次閱讀
- hadoop基礎知識介紹_hadoop是什么語言開發的_hadoop能做什么 3.9w次閱讀
- hadoop技術原理總結 4140次閱讀
- hadoop優缺點分析 1.6w次閱讀
- 自適應濾波算法理解與應用 2.5w次閱讀
- 自適應濾波器的作用、原理以及相關應用 2w次閱讀
- 淺析Hadoop集群硬件選擇 1648次閱讀
- 基于DSP的自適應濾波器的設計方案 8239次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1490次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費
- 6基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
- 7基于單片機和 SG3525的程控開關電源設計
- 0.23 MB | 3次下載 | 免費
- 8基于單片機的紅外風扇遙控
- 0.23 MB | 3次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537791次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
評論
查看更多