資料介紹
針對官方的Hadoop軟件中提供的節(jié)點心跳超時容錯機制對短作業(yè)并不合理,而且忽略了異構(gòu)集群中各節(jié)點超期時間設(shè)置的公平性的問題,提出了公平心跳超時容錯機制。首先根據(jù)每個節(jié)點的可靠性及計算性能構(gòu)建節(jié)點故障誤判損失模型,提出公平誤判損失(FMJL)算法,使其同時滿足長作業(yè)和短作業(yè)要求;接著,設(shè)計并實現(xiàn)了基于FMJL算法的公平超時機制。在實現(xiàn)了公平超時機制的Hadoop上運行大約345 s的短作業(yè)時,當出現(xiàn)TaskTracker節(jié)點故障時作業(yè)完成時間平均大約節(jié)省了44%,與自適應(yīng)超時機制相比,作業(yè)完成時間大約節(jié)省了23%。實驗結(jié)果表明,公平超時機制在保證不影響長作業(yè)完成時間的情況下縮短了短作業(yè)的容錯處理時間,提高了Hadoop的實時處理效率。
- 基于注意力機制的新聞文本分類模型 30次下載
- 基于FPGA塊存儲器的多位反轉(zhuǎn)容錯 19次下載
- 下行非正交多址接入系統(tǒng)的公平資源分配算法 4次下載
- 電機制動器拆卸安裝教程課件下載 3次下載
- 一種分層共識優(yōu)化機制TDH-PBFT 10次下載
- 主動容錯技術(shù)如何提高存儲系統(tǒng)的可靠性詳細算法模型資料說明 9次下載
- 基于虛擬化的仿真系統(tǒng)容錯方法 0次下載
- 多路徑纏繞模型及其容錯路由機制 0次下載
- TCP的超時與重傳的全面解說 7次下載
- 基于WindowsSocket的網(wǎng)絡(luò)通信中的心跳機制原理及其實現(xiàn) 6次下載
- 基于心跳消息的VANET安全應(yīng)用性能分析 26次下載
- 基于模糊流感知的動態(tài)優(yōu)先公平調(diào)度算法
- 一種基于星型結(jié)構(gòu)的移動代理的容錯模型
- 嵌入式系統(tǒng)的超時控制及其應(yīng)用
- 基于ARP緩存超時的中間人攻擊檢測方法
- Feign的超時時間如何設(shè)置呢? 1270次閱讀
- IC設(shè)計:一種簡單超時機制 488次閱讀
- LED單色屏發(fā)送超時的原因分析 3933次閱讀
- 影響報文超時上報的機制有哪些 1729次閱讀
- STM32程序超時設(shè)計 1202次閱讀
- 超時邏輯在OpenHarmony中的實現(xiàn) 880次閱讀
- 基于有限狀態(tài)機的FlexRay時鐘同步機制 3602次閱讀
- 基于容量證明的共識機制PoC介紹 2219次閱讀
- 如何注冊SERO Staking機制 1083次閱讀
- 如何使算法公平?如何定義“公平”? 4415次閱讀
- 關(guān)于一種面向異步FIFO的低開銷容錯機制研究 3210次閱讀
- 一文讀懂雙機熱備份和單機容錯的區(qū)別 4919次閱讀
- 一文讀懂容錯與冗余技術(shù) 1.9w次閱讀
- 基于AD620芯片的心跳速率檢測 1w次閱讀
- 一文讀懂如何解決MySQL數(shù)據(jù)庫超時配置問題 6607次閱讀
下載排行
本周
- 1DC電源插座圖紙
- 0.67 MB | 2次下載 | 免費
- 2AN158 GD32VW553 Wi-Fi開發(fā)指南
- 1.51MB | 2次下載 | 免費
- 3AN148 GD32VW553射頻硬件開發(fā)指南
- 2.07MB | 1次下載 | 免費
- 4AN111-LTC3219用戶指南
- 84.32KB | 次下載 | 免費
- 5AN153-用于電源系統(tǒng)管理的Linduino
- 1.38MB | 次下載 | 免費
- 6AN-283: Σ-Δ型ADC和DAC[中文版]
- 677.86KB | 次下載 | 免費
- 7SM2018E 支持可控硅調(diào)光線性恒流控制芯片
- 402.24 KB | 次下載 | 免費
- 8AN-1308: 電流檢測放大器共模階躍響應(yīng)
- 545.42KB | 次下載 | 免費
本月
- 1ADI高性能電源管理解決方案
- 2.43 MB | 450次下載 | 免費
- 2免費開源CC3D飛控資料(電路圖&PCB源文件、BOM、
- 5.67 MB | 138次下載 | 1 積分
- 3基于STM32單片機智能手環(huán)心率計步器體溫顯示設(shè)計
- 0.10 MB | 130次下載 | 免費
- 4使用單片機實現(xiàn)七人表決器的程序和仿真資料免費下載
- 2.96 MB | 44次下載 | 免費
- 53314A函數(shù)發(fā)生器維修手冊
- 16.30 MB | 31次下載 | 免費
- 6美的電磁爐維修手冊大全
- 1.56 MB | 24次下載 | 5 積分
- 7如何正確測試電源的紋波
- 0.36 MB | 17次下載 | 免費
- 8感應(yīng)筆電路圖
- 0.06 MB | 10次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935121次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計
- 1.48MB | 420062次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233088次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191367次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183335次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81581次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73810次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論