[發明專利]國網云中應用的一種基于大數據運維日志的方法

在審

• 申請號: 201710365526.3
• 申請日: 2017-05-22
• 公開（公告）號: CN107332685A
• 公開（公告）日: 2017-11-07
• 發明（設計）人: 王萍;胡聰;吳斌;馬永;張禾良;蔡夢臣;吳尚;徐敏;方圓;倪平波;張捷;胡州明;歐淵;楊帆;吳磊;左發先
• 申請（專利權）人: 國網安徽省電力公司信息通信分公司;四川中電啟明星信息技術有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L12/26
• 代理公司: 成都君合集專利代理事務所(普通合伙)51228
• 代理人: 張鳴潔

1.國網云中應用的一種基于大數據運維日志的方法，包括搭建大數據運維日志的硬件環境、軟件環境和集群環境，其特征在于，還包括：

1）采集日志信息并進行日志預處理，具體包括：

1.1）從軟硬件設備采集日志信息，并采用shell腳本、python腳本或Apache腳本中的任意一種對所述日志信息解析后轉換成統一的日志格式，所述日志信息包括計算機信息、系統信息、進程信息、磁盤信息、服務信息和應用信息；

1.2）用SQL語言提取日志中的用戶名和IP地址，生成用于識別用戶的表格實現日志清洗去重，所述SQL語言的代碼為：

index=splunk_monitoring sourcetype=tcp //獲取索引和日志類型

dedup host //去掉重復此主機的日志

table localaddress localport remotehostname remoteport processname username //統計該日志字段的值，并生成表格；

1.3）由所述表格中提取的用戶名和IP地址識別用戶，并生成以IP地址為主字段的記錄實現日志用戶識別；

2）統計一段時間的日志流量，并據此預測出日志流量的走勢并生成流量走勢圖展示給用戶，具體包括：

統計一段時間的日志流量，運用時間序列分析法進行日志流量統計，預測日志流量的走勢，為后續的日志流量預測模型提供數據；

日志流量預測模型加載所述日志流量值并運行，并生成流量走勢圖，實時的預測日志流量；

3）將步驟2）中生成的流量走勢圖通過展示界面可視化呈現。

2.根據權利要求1所述的國網云中應用的一種基于大數據運維日志的方法，其特征在于，所述展示界面還包括用于展示服務器運行情況的服務器監控模塊，所述服務器監控模塊分析本地服務器產生的日志信息，并顯示當前服務器的動態實現監控本地服務器以及采用splunk指定要訪問云上服務器，通過遠程桌面連接云上服務器，收集云上服務器的數據至本地，從最新的日志數據中，提取出最新的服務器空間狀況，實現云上服務器的實時監控。

3. 根據權利要求1所述的國網云中應用的一種基于大數據運維日志的方法，其特征在于，所述展示界面還包括用于搜索日志信息的日志搜索模塊，所述日志搜索模塊將所有的日志實時的收集到一起，建立起一個統一的搜索中心，通過調用splunk的應用組件創建輸入框實現對日志的檢索，將各個服務器的日志匯總顯示，并建立數據索引owa；在所述數據索引owa中輸入關鍵字和錯誤出現的時間，實現對在線預覽文檔的Office Web Apps服務器進行日志的搜索排錯。