電子發燒友App
創作
發文章
發帖 
提問 
發資料
發視頻資料介紹
近年來，隨著網絡和云計算技術的飛速發展，網絡數據以幾何級數的方式迅速增長。數據的爆炸性增長對存儲系統的容量、可擴展性以及I/O性能等方面提出了越來越高的要求。如今雖然計算、傳輸和存儲三大IT基礎設施都得到了飛速的發展，但是相對于計算和傳輸而言，存儲技術相對發展緩慢。分布式文件系統是指網絡中的多個存儲節點通過網絡組織起來，并通過網絡來完成各存儲節點的通信和控制的文件系統。由于其能有效解決分布式存儲系統的海量數據存儲和I/O瓶頸問題，在容量和可擴展性等方面有很大優勢，越來越受到企業界、學術界的青睞。
針對Hadoop分布式文件系統（HDFS）的寫性能在執行效率上的不足，提出一種在節點性能異構環境中對HDFS數據塊進行并發傳輸的調度算法。該算法實時監控HDFS集群中每個節點的資源狀態和內存緩存隊列，動態地將接收節點與轉發節點進行配對傳輸，使全系統節點的網卡和磁盤并發工作，縮短了所有副本寫入分布式文件系統的時間。將數據寫入磁盤后請求下一個數據塊，保證數據安全性，同時也使得各個節點獲得與自身性能相匹配的副本數，使性能異構的系統能達到較高的寫入速度。性能測試結果表明，使用該算法的分布式文件系統的寫入性能較原始的HDFS提高了l倍。
?
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 異構環境下的多DAG任務調度算法綜述 13次下載
- 基于SVC與多網絡接口的視頻塊聯合調度算法 4次下載
- 異構云環境中二級實時密碼服務調度策略 9次下載
- 申威.太湖之光深度學習庫中的并行卷積算法 1次下載
- 帶傳輸時限的跨數據中心數據傳輸調度算法 11次下載
- 基于異構云計算的工作預算等級調度算法 15次下載
- 擬態通用運行環境的資源管理調度及框架 6次下載
- 一種自適應多路傳輸數據調度算法GMM-S 5次下載
- 如何在實現工業物聯網應用中實現多時隙幀調度算法 4次下載
- DS1302的時鐘電路并行傳輸顯示方式程序和工程文件免費下載 12次下載
- 異構系統多副本容錯調度算法 0次下載
- 基于MIMO異構Ad Hoc網絡節點調度優化算法 0次下載
- 云計算環境中任務調度應用 3次下載
- 數據網格環境中傳輸性能的改進 17次下載
- 網格環境中多連接傳輸機制研究
- wdm主要應用在傳輸網絡的什么層 895次閱讀
- FreeRTOS任務調度器的三種調度算法講解（下） 3064次閱讀
- 塊調用環境對話框操作 674次閱讀
- 調度算法評測與仿真系統 調度算法仿真系統介紹 1905次閱讀
- 多種處理器調度過程及調度算法 1339次閱讀
- SD卡的三種傳輸模式及功能解析 2.1w次閱讀
- 如何使用CRC算法檢查數據傳輸的正確性 9131次閱讀
- 什么是串行總線和并行總線區別是什么 3w次閱讀
- DMA數據傳輸（源代碼分享） 9191次閱讀
- 基于異構并行計算的兩個子概念異構和并行的簡單分析 6630次閱讀
- Mapreduce和Hive中map reduce個數設定 6130次閱讀
- 成為一名并行異構并行計算工程師需要掌握的技能詳解 6632次閱讀
- 串行傳輸方式都比并行傳輸方式更勝一籌 7200次閱讀
- HDFS優化面臨新挑戰,如何按照數據冷熱程度進行分層存儲 3064次閱讀
- CPU+FPGA的圖片壓縮異構加速方案效率提升14倍 2191次閱讀
上傳資料賺積分下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費
- 2AN158 GD32VW553 Wi-Fi開發指南
- 1.51MB | 2次下載 | 免費
- 3AN148 GD32VW553射頻硬件開發指南
- 2.07MB | 1次下載 | 免費
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費
- 5AN153-用于電源系統管理的Linduino
- 1.38MB | 次下載 | 免費
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費
- 7SM2018E 支持可控硅調光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費
- 8AN-1308: 電流檢測放大器共模階躍響應
- 545.42KB | 次下載 | 免費
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費
- 2免費開源CC3D飛控資料（電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機智能手環心率計步器體溫顯示設計
- 0.10 MB | 130次下載 | 免費
- 4使用單片機實現七人表決器的程序和仿真資料免費下載
- 2.96 MB | 44次下載 | 免費
- 53314A函數發生器維修手冊
- 16.30 MB | 31次下載 | 免費
- 6美的電磁爐維修手冊大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測試電源的紋波
- 0.36 MB | 17次下載 | 免費
- 8感應筆電路圖
- 0.06 MB | 10次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
工商網監
評論