資料介紹
近年來,隨著網絡和云計算技術的飛速發展,網絡數據以幾何級數的方式迅速增長。數據的爆炸性增長對存儲系統的容量、可擴展性以及I/O性能等方面提出了越來越高的要求。如今雖然計算、傳輸和存儲三大IT基礎設施都得到了飛速的發展,但是相對于計算和傳輸而言,存儲技術相對發展緩慢。分布式文件系統是指網絡中的多個存儲節點通過網絡組織起來,并通過網絡來完成各存儲節點的通信和控制的文件系統。由于其能有效解決分布式存儲系統的海量數據存儲和I/O瓶頸問題,在容量和可擴展性等方面有很大優勢,越來越受到企業界、學術界的青睞。
針對Hadoop分布式文件系統(HDFS)的寫性能在執行效率上的不足,提出一種在節點性能異構環境中對HDFS數據塊進行并發傳輸的調度算法。該算法實時監控HDFS集群中每個節點的資源狀態和內存緩存隊列,動態地將接收節點與轉發節點進行配對傳輸,使全系統節點的網卡和磁盤并發工作,縮短了所有副本寫入分布式文件系統的時間。將數據寫入磁盤后請求下一個數據塊,保證數據安全性,同時也使得各個節點獲得與自身性能相匹配的副本數,使性能異構的系統能達到較高的寫入速度。性能測試結果表明,使用該算法的分布式文件系統的寫入性能較原始的HDFS提高了l倍。
?
- 異構環境下的多DAG任務調度算法綜述 13次下載
- 基于SVC與多網絡接口的視頻塊聯合調度算法 4次下載
- 異構云環境中二級實時密碼服務調度策略 9次下載
- 申威.太湖之光深度學習庫中的并行卷積算法 1次下載
- 帶傳輸時限的跨數據中心數據傳輸調度算法 11次下載
- 基于異構云計算的工作預算等級調度算法 15次下載
- 擬態通用運行環境的資源管理調度及框架 6次下載
- 一種自適應多路傳輸數據調度算法GMM-S 5次下載
- 如何在實現工業物聯網應用中實現多時隙幀調度算法 4次下載
- DS1302的時鐘電路并行傳輸顯示方式程序和工程文件免費下載 12次下載
- 異構系統多副本容錯調度算法 0次下載
- 基于MIMO異構Ad Hoc網絡節點調度優化算法 0次下載
- 云計算環境中任務調度應用 3次下載
- 數據網格環境中傳輸性能的改進 17次下載
- 網格環境中多連接傳輸機制研究
- wdm主要應用在傳輸網絡的什么層 286次閱讀
- FreeRTOS任務調度器的三種調度算法講解(下) 1794次閱讀
- 塊調用環境對話框操作 522次閱讀
- 調度算法評測與仿真系統 調度算法仿真系統介紹 1710次閱讀
- 多種處理器調度過程及調度算法 1230次閱讀
- SD卡的三種傳輸模式及功能解析 2w次閱讀
- 如何使用CRC算法檢查數據傳輸的正確性 8699次閱讀
- 什么是串行總線和并行總線區別是什么 3w次閱讀
- DMA數據傳輸(源代碼分享) 8943次閱讀
- 基于異構并行計算的兩個子概念異構和并行的簡單分析 6466次閱讀
- Mapreduce和Hive中map reduce個數設定 6017次閱讀
- 成為一名并行異構并行計算工程師需要掌握的技能詳解 6499次閱讀
- 串行傳輸方式都比并行傳輸方式更勝一籌 7046次閱讀
- HDFS優化面臨新挑戰,如何按照數據冷熱程度進行分層存儲 2975次閱讀
- CPU+FPGA的圖片壓縮異構加速方案效率提升14倍 2099次閱讀
下載排行
本周
- 1電子電路原理第七版PDF電子教材免費下載
- 0.00 MB | 1490次下載 | 免費
- 2單片機典型實例介紹
- 18.19 MB | 93次下載 | 1 積分
- 3S7-200PLC編程實例詳細資料
- 1.17 MB | 27次下載 | 1 積分
- 4筆記本電腦主板的元件識別和講解說明
- 4.28 MB | 18次下載 | 4 積分
- 5開關電源原理及各功能電路詳解
- 0.38 MB | 10次下載 | 免費
- 6基于AT89C2051/4051單片機編程器的實驗
- 0.11 MB | 4次下載 | 免費
- 7基于單片機和 SG3525的程控開關電源設計
- 0.23 MB | 3次下載 | 免費
- 8基于單片機的紅外風扇遙控
- 0.23 MB | 3次下載 | 免費
本月
- 1OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 2PADS 9.0 2009最新版 -下載
- 0.00 MB | 66304次下載 | 免費
- 3protel99下載protel99軟件下載(中文版)
- 0.00 MB | 51209次下載 | 免費
- 4LabView 8.0 專業版下載 (3CD完整版)
- 0.00 MB | 51043次下載 | 免費
- 5555集成電路應用800例(新編版)
- 0.00 MB | 33562次下載 | 免費
- 6接口電路圖大全
- 未知 | 30320次下載 | 免費
- 7Multisim 10下載Multisim 10 中文版
- 0.00 MB | 28588次下載 | 免費
- 8開關電源設計實例指南
- 未知 | 21539次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935053次下載 | 免費
- 2protel99se軟件下載(可英文版轉中文版)
- 78.1 MB | 537791次下載 | 免費
- 3MATLAB 7.1 下載 (含軟件介紹)
- 未知 | 420026次下載 | 免費
- 4OrCAD10.5下載OrCAD10.5中文版軟件
- 0.00 MB | 234313次下載 | 免費
- 5Altium DXP2002下載入口
- 未知 | 233046次下載 | 免費
- 6電路仿真軟件multisim 10.0免費下載
- 340992 | 191183次下載 | 免費
- 7十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183277次下載 | 免費
- 8proe5.0野火版下載(中文版免費下載)
- 未知 | 138039次下載 | 免費
評論
查看更多