資料介紹
針對Storm流式計算平臺中默認輪詢調度策略存在通信開銷大、負載不均衡的問題,提出基于拓撲結構的任務調度策略( TS2)。首先,選取CPU資源充足且可用的工作節(jié)點并各分配一個進程,消除節(jié)點內進程間通信開銷,優(yōu)化進程部署;然后,分析拓撲結構,找出拓撲中度最大的組件,優(yōu)先分配該組件的線程;最后,在滿足節(jié)點可承載最大線程數的條件下,盡可能將關聯任務部署到同一個節(jié)點來減少節(jié)點間通信開銷,改善集群負載均衡,優(yōu)化線程部署。實驗結果表明:在系統延遲方面,與Storm默認調度策略和離線調度策略相比,TS的平均優(yōu)化率分別為16. 91%和5. 69%,有效提高了系統的實時性;在節(jié)點間通信開銷方面,TS相比于Storm默認調度策略平均降低了15. 75%;在平均吞吐量方面,TS相比于Storm默認調度策略平均提升了14. 21%。
隨著互聯網+時代來臨,全球數據量急劇增長。國際數據公司( International Data Corporation,IDC)發(fā)布的白皮書《數據時代2025》中提出,預計到2025年全球數據量將達到163ZB,其中超過25%的數據將成為實時數據,而物聯網實時數據將占到95%[1],面對如此龐大的實時數據量,需要時效性高、可擴展性和穩(wěn)定性強的流式計算框架。與批量計算不同,流式計算不再對數據的中間結果進行存儲,數據直接在各個工作節(jié)點的內存中進行計算。在這種應用場景下,以Twitter公司的Storm系統為代表的幾種實時計算框架應運而生,也將流式計算的應用范圍逐漸擴展到物聯網、金融、社交媒體以及實時交通等實時性要求高的領域‘糾。其中在Storm環(huán)境下,針對套牌車識別具有時效性約束的問題,相關學者提出了一種基于實時車牌識別的流式并行檢測方法,并且該方法的準確率達到了98.7%_3],實時獲取車輛的動態(tài)信息已經成為可能。
- 異構環(huán)境下的多DAG任務調度算法綜述 13次下載
- 云環(huán)境下HEDSM工作流調度策略綜述 6次下載
- 異構云環(huán)境中二級實時密碼服務調度策略 9次下載
- 可反映用戶偏好的多目標任務調度算法 3次下載
- EDA多任務流調度算法實驗設計 5次下載
- 如何在云計算環(huán)境下進行資源調度算法的研究 4次下載
- 數據庫概念結構和邏輯與物理結構如何進行設計 17次下載
- MapReduce節(jié)能任務調度策略 0次下載
- 云環(huán)境下基于聚簇的執(zhí)行優(yōu)化策略 0次下載
- 一種新的調度策略優(yōu)化Spark在異構集群下表現 0次下載
- 云計算環(huán)境中任務調度應用 3次下載
- 基于Qos綜合滿意度的云計算任務調度策略 0次下載
- 網格任務調度算法研究
- VxWorks下周期任務調度和任務周期選擇
- 樹型網格計算環(huán)境下的自適應任務調度算法
- 如何進行RF PA Ruggedness的測試和評估呢? 2704次閱讀
- 什么是計算機網絡的拓撲結構?主要的拓撲結構有哪些? 2420次閱讀
- 網絡拓撲結構有哪幾種類型 網絡拓撲結構優(yōu)缺點 1830次閱讀
- 拓撲視圖與實際拓撲結構間的差異 1154次閱讀
- RTOS應用中的調度策略 702次閱讀
- Apache Storm的安裝部署 995次閱讀
- Apache Storm是什么 1155次閱讀
- 任務調度開源代碼是什么 950次閱讀
- 嵌入式軟件架構設計之任務調度 2285次閱讀
- FreeRTOS任務和協程簡介及實現 3153次閱讀
- 在Allegro中如何進行skill的安裝 4332次閱讀
- 鴻蒙內核源碼的中斷環(huán)境下的任務切換 2330次閱讀
- 鴻蒙內核分析:線程中斷環(huán)境下的任務切換 2622次閱讀
- 總線型拓撲結構優(yōu)缺點是什么 2.5w次閱讀
- 什么是電路拓撲結構_多種pfc電路的拓撲結構介紹 5.2w次閱讀
下載排行
本周
- 1貼片三極管上的印字與真實名稱的對照表詳細說明
- 0.50 MB | 87次下載 | 1 積分
- 2802.11_Wireless_Networks
- 4.17 MB | 12次下載 | 免費
- 33D AD庫文件
- 16.96 MB | 2次下載 | 免費
- 4BDR6121G直流電機驅動芯片中文手冊
- 0.54 MB | 1次下載 | 免費
- 5ANT8817 1%3.5W/3.7V,同步自適應升壓,超長續(xù)航,H類防破音單聲道音頻功放中文手冊
- 1.11 MB | 1次下載 | 免費
- 610K-100K B3950-B3435NTC熱敏電阻快速查詢對照表
- 0.10 MB | 1次下載 | 1 積分
- 7ANT8825S內置同步升壓,防破音,AB/D類雙模立體聲音頻功放中文手冊
- 1.29 MB | 次下載 | 免費
- 8ANT3270 2×75W/2×38W+75W,免電感,低EMI,D類音頻功率放大器中文手冊
- 1.33 MB | 次下載 | 免費
本月
- 1AI智能眼鏡產業(yè)鏈分析
- 4.43 MB | 311次下載 | 免費
- 2蘇泊爾電磁爐線路的電路原理圖資料合集
- 2.02 MB | 286次下載 | 5 積分
- 3長虹液晶電視R-HS310B-5HF01的電源板電路原理圖
- 0.46 MB | 87次下載 | 5 積分
- 4貼片三極管上的印字與真實名稱的對照表詳細說明
- 0.50 MB | 87次下載 | 1 積分
- 5U盤一鍵制作
- 23.84 MB | 41次下載 | 免費
- 6AO4803A雙P通道增強型場效應晶體管的數據手冊
- 0.11 MB | 28次下載 | 2 積分
- 7長虹液晶彩電LS29機芯的技術資料說明
- 3.42 MB | 16次下載 | 2 積分
- 8802.11_Wireless_Networks
- 4.17 MB | 12次下載 | 免費
總榜
- 1matlab軟件下載入口
- 未知 | 935127次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關降壓/升壓雙向直流/直流轉換器 PCB layout 設計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191387次下載 | 10 積分
- 5十天學會AVR單片機與C語言視頻教程 下載
- 158M | 183342次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81586次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73815次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65988次下載 | 10 積分
評論