一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

這款大電網(wǎng)海量數(shù)據(jù)解決方案,效率提升不止一點點

qm9W_gridthink ? 來源:互聯(lián)網(wǎng) ? 作者:佚名 ? 2017-12-16 08:25 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

中國地大物博,人口眾多,很多民生工程都是至關(guān)重要的,電網(wǎng)就是其中的典型代表。作為全球最大的公用事業(yè)企業(yè),電網(wǎng)經(jīng)營區(qū)域覆蓋全國,供電人口數(shù)量龐大,是關(guān)系國民經(jīng)濟命脈和國家能源安全的國有重點骨干企業(yè),承擔著保障更安全、更經(jīng)濟、更清潔、可持續(xù)的電力供應基本使命。然而作為電網(wǎng)運作的支持基礎(chǔ),電網(wǎng)的信息化建設(shè)一直面臨著來自地域跨度大、異構(gòu)化管理、利舊觀念根深蒂固等問題,企業(yè)信息化建設(shè)在不斷向前發(fā)展。

除了面對傳統(tǒng)信息化建設(shè)轉(zhuǎn)型的挑戰(zhàn),電網(wǎng)還面臨著來自“互聯(lián)網(wǎng)+”的壓力。在“互聯(lián)網(wǎng)+”的大環(huán)境中,其業(yè)務形式、服務理念改變,讓電網(wǎng)認識到信息化一定要服務于用戶 ,用戶體驗才是“互聯(lián)網(wǎng)+”潮流中的主要競爭力。與此同時,電網(wǎng)龐大系統(tǒng)產(chǎn)生的海量歷史實時數(shù)據(jù)的利用也是個難題,如何針對電網(wǎng)各環(huán)節(jié)運行和監(jiān)測中產(chǎn)生的海量歷史實時數(shù)據(jù),做相應的存儲、集中、整合、共享和分析,同時對外提供標準統(tǒng)一的訪問服務,是電網(wǎng)信息化建設(shè)的重要組成部分。

大、多、新、難——日志集中管理來幫忙

在電網(wǎng)的海量數(shù)據(jù)中,比較讓人頭疼的數(shù)據(jù)之一便是日志。我們都知道,電網(wǎng)在多年的發(fā)展中不斷的更新進化,長年累月的積累導致各方面的設(shè)備類型種類較多。與此同時,由于發(fā)展服務器的數(shù)量規(guī)模也在不斷壯大,更涉及到省、市、縣等多級接入,面臨的復雜情況可想而知。再加上電網(wǎng)進入云化改造階段,運維人員從原來幾百臺小型機,轉(zhuǎn)換到面對上千臺x86服務器,幾千個虛擬機,日常運維也帶來新的復雜變化。

基礎(chǔ)設(shè)施的龐大也預示著業(yè)務系統(tǒng)多樣化,生產(chǎn)系統(tǒng)、營銷系統(tǒng)、調(diào)度系統(tǒng)、財務系統(tǒng)、中間件、數(shù)據(jù)庫等等上百個系統(tǒng)同時運轉(zhuǎn),而且由于時間和業(yè)務需求不同,這些系統(tǒng)大多是來源于不同時期的不同開發(fā)商,日志非常不規(guī)范,一旦其中某個系統(tǒng)出現(xiàn)問題,想要及時定位故障所在會非常困難,于是日志易就能彰顯價值。

在對業(yè)務系統(tǒng)、基礎(chǔ)設(shè)施以及網(wǎng)絡設(shè)備的日志進行集中管理后,提取不同設(shè)備及應用的日志字段用于后續(xù)事件分析,這中間涉及防火墻、中間件、Linux和Windows操作系統(tǒng)等多種類型日志。

采集后我們可以基于角色的權(quán)限管理,對日志進行分組,賦予使用者不同的權(quán)限,如此龐大規(guī)模的日志我們可以按照習慣設(shè)立成數(shù)十個分組,讓整個體系架構(gòu)清晰明了。與此同時還能通過儀表盤分組,靈活查看不同設(shè)備日志的整體運維情況,方便掌握龐大系統(tǒng)下的不同模塊運行情況,做到有的放矢。

集中管理還不夠,用日志來做深度分析

做到了復雜情況下的日志集中管理,其實是遠遠不夠的,這只是第一步,我們還需要把獲取的日志數(shù)據(jù)利用起來,這時候面臨的情況就更加復雜了,例如有的時候業(yè)務出現(xiàn)問題,而網(wǎng)管監(jiān)控系統(tǒng)的指標卻是正常的,更難以從海量日志中快速定位故障

面對這種情況,我們可以隨時調(diào)閱定時任務統(tǒng)計結(jié)果進行分析,同時對每天統(tǒng)計結(jié)果進行二次統(tǒng)計,進而分析出周、月、年的業(yè)務數(shù)據(jù)運維情況,并定時產(chǎn)生報表,自動發(fā)送用戶郵箱。

在深度分析方面,日志易不僅可以通過歷史基線對比,實時掌握同比數(shù)據(jù)分析情況,還可以更精細的分析不同維度的業(yè)務運行情況,下面便是一些通過日志進行業(yè)務分析的典型例子:

上圖的分布圖和柱狀圖直觀的顯示出業(yè)務系統(tǒng)來源IP的分布,可以看出有一個IP在最近30分鐘內(nèi)的訪問量比其他IP都要多很多。經(jīng)過分析推測出兩種潛在原因:

  • 該IP為堡壘機,所有客戶端的訪問都經(jīng)過堡壘機訪問到業(yè)務系統(tǒng)。如果是堡壘機,可以看出堡壘機的負載并不均衡,需要運維人員著重觀察下堡壘機的負載情況。

  • 該IP是客戶端IP,如果是客戶端IP的話,那么近30分鐘的訪問量達到6萬次,需要運維人員重點關(guān)注下該IP對應屬于哪個部門的的哪個人員,有沒有在做高危操作。

上圖的業(yè)務訪問區(qū)間為正態(tài)分布展現(xiàn),對于在藍色區(qū)域面積的訪問量是正常的,超過面積的則為異常點,可以通過鼠標下鉆到詳細日志,可以查看異常的詳細情況,方便及時解決業(yè)務異常情況。

除此之外,我們還能詳細查看業(yè)務系統(tǒng)404錯誤排行、業(yè)務系統(tǒng)訪問排名、主機情況、交換機概述等具體情況,同時還能對多設(shè)備運維數(shù)據(jù)進行實時對比。

最后我們還能通過對不同設(shè)備進行告警設(shè)置,配置交換機常用關(guān)鍵字告警策略,觸發(fā)告警后產(chǎn)生報表并自動發(fā)送至用戶郵箱。

電網(wǎng)的信息化建設(shè)情況復雜,海量日志數(shù)據(jù)的合理利用為電網(wǎng)提供了便利并帶來巨大價值:采集網(wǎng)絡設(shè)備、服務器日志并進行日志解析,實時化運維對關(guān)鍵字進行告警,對日志核心指標進行分析;運維自動化、智能化,根據(jù)業(yè)務邏輯關(guān)聯(lián)分析日志信息,自動分析異常業(yè)務流轉(zhuǎn)環(huán)節(jié);基于海量日志數(shù)據(jù)挖掘的智慧運維,做到運維的異常自動檢測、容量預測和規(guī)劃等。相信隨著對海量日志數(shù)據(jù)價值的深度挖掘,未來日志易還會為電網(wǎng)提供更有力的后續(xù)支持。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴

原文標題:大電網(wǎng)復雜環(huán)境下的海量數(shù)據(jù)解決方案

文章出處:【微信號:gridthink,微信公眾號:電網(wǎng)智囊團】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    使用設(shè)計工具設(shè)計的帶通濾波器與Multisim仿真結(jié)果不致是怎么回事?

    使用設(shè)計工具在300Hz是有一點點增益的,但是使用Multisim 仿真卻沒有放大,反而發(fā)生了衰減,對照了元件沒有發(fā)現(xiàn)有錯誤的。
    發(fā)表于 04-24 07:53

    機器視覺運動控制體機在龍門跟隨膠的解決方案

    正運動龍門跟隨解決方案
    的頭像 發(fā)表于 04-01 10:40 ?319次閱讀
    機器視覺運動控制<b class='flag-5'>一</b>體機在龍門跟隨<b class='flag-5'>點</b>膠的<b class='flag-5'>解決方案</b>

    STM32L431RCT6主芯片 搭配 SD NAND-動態(tài)心電圖設(shè)備存儲解決方案

    與MKDV08GCL-STPA 貼片式SD卡存儲解決方案,我們成功解決了傳統(tǒng)設(shè)備在數(shù)據(jù)存儲、處理效率和功耗管理方面的技術(shù)痛,實現(xiàn)了設(shè)備性能的全面優(yōu)化。
    發(fā)表于 03-27 10:56

    光伏發(fā)電防逆流解決方案 -守護電網(wǎng)安全,提升能源效率

    在當今大力發(fā)展清潔能源的時代背景下,光伏發(fā)電作為種可持續(xù)的能源解決方案,正得到越來越廣泛的應用。然而,光伏發(fā)電過程中出現(xiàn)的逆流問題,給電網(wǎng)的安全穩(wěn)定運行帶來了諸多挑戰(zhàn)。若不能有效解決,不僅
    的頭像 發(fā)表于 02-23 17:17 ?447次閱讀
    光伏發(fā)電防逆流<b class='flag-5'>解決方案</b> -守護<b class='flag-5'>電網(wǎng)</b>安全,<b class='flag-5'>提升</b>能源<b class='flag-5'>效率</b>

    用LMP91200采集PH信號,LMP91200輸出的電壓會一點一點下降,是什么原因?qū)е碌模?/a>

    我用LMP91200采集PH信號。在前段信號無變化的情況下,LMP91200輸出的電壓會一點一點下降。電路連接我是參考LMP91200開發(fā)板的。 請問可能是什么原因?需要采取什么措施解決?
    發(fā)表于 02-05 06:12

    KT148A語音芯片的聲音小,如何讓喇叭聲音變大?聲音影響注意

    聲音的大小是個系統(tǒng)的工作,KT148A本身驅(qū)動聲音的能力是很大的,達到200mA,通過電流也可以看出來。所以般8歐姆1w以內(nèi)的,不需要考慮外掛功放 喇叭的選擇原則上越大越好,視結(jié)構(gòu)而定。 盡量選擇紙盆類型的喇叭【某寶搜搜】,發(fā)聲更清晰,更大,也就貴
    的頭像 發(fā)表于 01-10 09:53 ?681次閱讀
    KT148A語音芯片的聲音小,如何讓喇叭聲音變大?聲音影響注意<b class='flag-5'>點</b>

    量子顯示技術(shù)如何提升畫質(zhì)?

    量子顯示技術(shù)提升畫質(zhì)的方式主要體現(xiàn)在以下幾個方面: 高色域:量子顯示技術(shù)能夠顯著提升顯示設(shè)備的色域。通過量子材料的應用,液晶電視的色域
    的頭像 發(fā)表于 01-03 13:24 ?560次閱讀

    數(shù)據(jù)庫和云主機哪個好一點

    數(shù)據(jù)庫和云主機哪個好一點?云主機和云數(shù)據(jù)庫各有優(yōu)勢,選擇哪個更好取決于具體需求。云主機提供虛擬化的計算資源,適用于運行各種應用;而云數(shù)據(jù)庫專注于數(shù)
    的頭像 發(fā)表于 12-04 13:50 ?457次閱讀

    天拓四方:Fanuc機床數(shù)據(jù)采集與遠程運維解決方案

    分析技術(shù),本方案旨在為企業(yè)提供套完整的、從數(shù)據(jù)采集到?jīng)Q策支持的全鏈條解決方案,助力企業(yè)實現(xiàn)生產(chǎn)效率的飛躍、運維成本的降低以及智能化水平的顯
    的頭像 發(fā)表于 11-05 15:41 ?624次閱讀
    天拓四方:Fanuc機床<b class='flag-5'>數(shù)據(jù)</b>采集與遠程運維<b class='flag-5'>解決方案</b>

    大功率貼片電感的電感值偏大一點可以用嗎

    電子發(fā)燒友網(wǎng)站提供《大功率貼片電感的電感值偏大一點可以用嗎.docx》資料免費下載
    發(fā)表于 09-20 11:33 ?0次下載

    DC/DC有線網(wǎng)絡交換系統(tǒng)的負載電源解決方案

    電子發(fā)燒友網(wǎng)站提供《DC/DC有線網(wǎng)絡交換系統(tǒng)的負載電源解決方案.pdf》資料免費下載
    發(fā)表于 09-18 10:31 ?0次下載
    DC/DC有線網(wǎng)絡交換系統(tǒng)的負載<b class='flag-5'>點</b>電源<b class='flag-5'>解決方案</b>

    功率放大器測試解決方案分享——EHD膠測試

    功率放大器測試解決方案分享——EHD膠測試
    的頭像 發(fā)表于 09-13 08:01 ?659次閱讀
    功率放大器測試<b class='flag-5'>解決方案</b>分享——EHD<b class='flag-5'>點</b>膠測試

    電感碎了一點點能正常用嗎

    電子發(fā)燒友網(wǎng)站提供《電感碎了一點點能正常用嗎.docx》資料免費下載
    發(fā)表于 09-04 11:32 ?0次下載

    LMH6502的輸入電壓到底是多少?

    LMH6502的輸入電壓到底是多少,我稍微給如大一點點的信號,放大不行還能接受,我衰減都失真,
    發(fā)表于 08-27 07:02

    INA301為什么在共模信號給到5V多一點點的時候,偏置電流會突然變大那么多?

    最近在用INA301芯片,因為比較關(guān)注偏置電流指標如下圖,有個疑惑,為什么在共模信號給到5V多一點點的時候,偏置電流會突然變大那么多?
    發(fā)表于 08-01 07:58