一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

您好,歡迎來電子發(fā)燒友網(wǎng)! ,新用戶?[免費(fèi)注冊]

您的位置:電子發(fā)燒友網(wǎng)>源碼下載>數(shù)值算法/人工智能>

Storm環(huán)境下基于權(quán)重的任務(wù)調(diào)度算法

大?。?/span>1.35 MB 人氣: 2018-04-17 需要積分:1

  大數(shù)據(jù)流式計算平臺Apache Storm默認(rèn)采用輪詢的方式進(jìn)行任務(wù)調(diào)度,未考慮到拓?fù)渲懈魅蝿?wù)計算開銷的差異以及任務(wù)之間不同類型的通信模式,在負(fù)載均衡和通信開銷方面存在較大的優(yōu)化空間。針對這一問題,提出一種Storm環(huán)境下基于權(quán)重的任務(wù)調(diào)度算法(TSAW-Storm)。該算法首先根據(jù)各任務(wù)的CPU資源占用情況以及任務(wù)間的數(shù)據(jù)流大小,分別確定拓?fù)涞狞c(diǎn)權(quán)和邊權(quán);并利用最大化邊權(quán)增益的思想,逐步構(gòu)建起各工作節(jié)點(diǎn)中承載的任務(wù)集合,在保證集群負(fù)載均衡的同時,盡可能將邊權(quán)較大的節(jié)點(diǎn)間數(shù)據(jù)流轉(zhuǎn)化為節(jié)點(diǎn)內(nèi)數(shù)據(jù)流,從而降低網(wǎng)絡(luò)傳輸開銷。實(shí)驗結(jié)果表明,在包含有8個工作節(jié)點(diǎn)的WordCount基準(zhǔn)測試中,TSAW-Storm的系統(tǒng)延遲和節(jié)點(diǎn)間數(shù)據(jù)流大小相比Storm默認(rèn)調(diào)度算法分別降低了30.0%和32.9%,且各工作節(jié)點(diǎn)的CPU負(fù)載標(biāo)準(zhǔn)差僅為Storm默認(rèn)調(diào)度算法的25.8%;此外,在與在線調(diào)度算法的對比實(shí)驗中,TSAW-Storm在系統(tǒng)延遲、節(jié)點(diǎn)間數(shù)據(jù)流大小和CPU負(fù)載標(biāo)準(zhǔn)差方面分別降低了7. 76%、11. 8%和5.93 %,且算法的執(zhí)行開銷明顯降低,有效提高了Storm系統(tǒng)的運(yùn)行效率。

Storm環(huán)境下基于權(quán)重的任務(wù)調(diào)度算法

非常好我支持^.^

(0) 0%

不好我反對

(0) 0%

      發(fā)表評論

      用戶評論
      評價:好評中評差評

      發(fā)表評論,獲取積分! 請遵守相關(guān)規(guī)定!

      ?