一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

您好,歡迎來電子發(fā)燒友網(wǎng)! ,新用戶?[免費(fèi)注冊(cè)]

您的位置:電子發(fā)燒友網(wǎng)>源碼下載>數(shù)值算法/人工智能>

對(duì)于大規(guī)模系統(tǒng)日志的日志模式提煉算法的優(yōu)化

大?。?/span>0.66 MB 人氣: 2017-11-21 需要積分:0

  LARGE框架是部署在中國(guó)科學(xué)院超級(jí)計(jì)算環(huán)境中的日志分析系統(tǒng),通過日志收集、集中分析、結(jié)果反饋等步驟對(duì)環(huán)境中的各種日志文件進(jìn)行監(jiān)控和分析。在對(duì)環(huán)境中系統(tǒng)日志的監(jiān)控過程中,系統(tǒng)維護(hù)人員需要通過日志模式提煉算法將大量的過往系統(tǒng)日志記錄縮減為少量的日志模式集合。然而隨著日志規(guī)模的增長(zhǎng)以及messages日志文件的特殊性,原有的日志模式提煉算法已經(jīng)難以滿足對(duì)大規(guī)模日志快速處理的需要。介紹了一種對(duì)于日志模式提煉算法的優(yōu)化方法,通過引入MapReduce機(jī)制實(shí)現(xiàn)在存在多個(gè)日志輸入文件的情況下對(duì)日志處理和模式提煉的流程進(jìn)行加速。實(shí)驗(yàn)表明,當(dāng)輸入文件較多時(shí),該優(yōu)化方法能夠顯著提高詞匯一致率算法的運(yùn)行速度,大幅減少運(yùn)行時(shí)間。此外,還對(duì)使用詞匯轉(zhuǎn)換函數(shù)時(shí)的算法運(yùn)行時(shí)間和提煉效果進(jìn)行了驗(yàn)證。

對(duì)于大規(guī)模系統(tǒng)日志的日志模式提煉算法的優(yōu)化

非常好我支持^.^

(0) 0%

不好我反對(duì)

(0) 0%

      發(fā)表評(píng)論

      用戶評(píng)論
      評(píng)價(jià):好評(píng)中評(píng)差評(píng)

      發(fā)表評(píng)論,獲取積分! 請(qǐng)遵守相關(guān)規(guī)定!

      ?