[發明專利]一種日志處理方法及電子設備、服務器、存儲介質有效
| 申請號: | 202010861335.8 | 申請日: | 2020-08-25 |
| 公開(公告)號: | CN111740884B | 公開(公告)日: | 2021-06-25 |
| 發明(設計)人: | 何闖;陶波;趙士瑞;歐懷谷;王梟卿 | 申請(專利權)人: | 云盾智慧安全科技有限公司 |
| 主分類號: | H04L12/26 | 分類號: | H04L12/26;H04L12/24 |
| 代理公司: | 廣州德科知識產權代理有限公司 44381 | 代理人: | 萬振雄;楊中強 |
| 地址: | 100037 北京市西*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 日志 處理 方法 電子設備 服務器 存儲 介質 | ||
1.一種日志處理方法,其特征在于,所述方法應用于邊緣節點;所述方法包括:
采集所述邊緣節點的業務程序運行時在預設時長內產生的增量日志;
按照所述邊緣節點的配置信息,對所述增量日志進行流式分析處理,獲得日志統計數據,其中,所述日志統計數據包括日志統計表,所述日志統計表包括第一列屬性和第二列屬性,所述第一列屬性用于表示節點信息,所述第二列屬性用于表示處理時間;
將所述日志統計數據上報給中心服務端,使得所述中心服務端存儲所述日志統計數據,并按照預設的分析算法對所述日志統計數據進行分析,將分析結果輸出至用戶界面進行顯示,以及,接收通過所述用戶界面輸入的用戶配置信息,并結合所述分析結果以及所述用戶配置信息,獲得綜合評定結果,根據所述綜合評定結果生成對所述邊緣節點的配置指令,再將所述配置指令下發給所述邊緣節點;
從所述中心服務端接收所述配置指令,并根據所述配置指令更新所述配置信息,其中,所述配置信息至少包括所述邊緣節點采集所述增量日志時對應的處理指令和閾值信息,對所述增量日志進行流式分析處理時對應的處理指令和閾值信息,以及上報所述日志統計數據時對應的處理指令和閾值信息。
2.根據權利要求1所述的方法,其特征在于,所述配置信息包括查詢語言指令;所述按照所述邊緣節點的配置信息,對所述增量日志進行流式分析處理,獲得日志統計數據,包括:
對所述增量日志進行格式化處理,獲得滿足所述查詢語言指令對應的預設格式的日志數據流;
根據所述查詢語言指令,對所述日志數據流進行流式分析處理,獲得日志統計數據。
3.根據權利要求2所述的方法,其特征在于,所述根據所述查詢語言指令,對所述日志數據流進行流式分析處理,獲得日志統計數據,包括:
根據所述查詢語言指令,確定所述查詢語言指令所查詢的數據類型;
根據所述日志數據流包括的分割符對所述日志數據流進行分割,獲得多行日志數據;
獲取每行日志數據中與所述數據類型對應的目標數據;
按照所述查詢語言指令,對多行日志數據各自對應的目標數據進行流式統計分析,獲得日志統計數據。
4.一種日志處理方法,其特征在于,所述方法應用于中心服務端;所述方法包括:
接收邊緣節點上報的日志統計數據,所述日志統計數據為所述邊緣節點按照所述邊緣節點的配置信息對增量日志進行流式分析處理后獲得的數據,所述增量日志為所述邊緣節點的業務程序運行時在預設時長內產生的日志,其中,所述日志統計數據包括日志統計表,所述日志統計表包括第一列屬性和第二列屬性,所述第一列屬性用于表示節點信息,所述第二列屬性用于表示處理時間;
對所述日志統計數據進行存儲,并按照預設的分析算法對所述日志統計數據進行分析,將分析結果輸出至用戶界面進行顯示,以及,接收通過所述用戶界面輸入的用戶配置信息,并結合所述分析結果以及所述用戶配置信息,獲得綜合評定結果,根據所述綜合評定結果生成對所述邊緣節點的配置指令;
將所述配置指令下發給所述邊緣節點,以使得所述邊緣節點根據所述配置指令更新所述配置信息,其中,所述配置信息至少包括所述邊緣節點采集所述增量日志時對應的處理指令和閾值信息,對所述增量日志進行流式分析處理時對應的處理指令和閾值信息,以及上報所述日志統計數據時對應的處理指令和閾值信息。
5.根據權利要求4所述的方法,其特征在于,所述對所述日志統計數據進行存儲之后,所述方法還包括:
獲取所述中心服務端已存儲的全量日志數據,所述全量日志數據包括所述中心服務端所管理的所有邊緣節點上報過的日志統計數據;
對所述日志統計數據進行分析,生成配置指令,包括:
對所述日志統計數據進行流式分析,獲得實時統計數據;
對所述全量日志數據進行統計分析,獲得歷史統計數據;
根據所述實時統計數據和歷史統計數據,確定匯總結果;
結合所述匯總結果以及所述邊緣節點的配置信息進行分析,獲得分析結果;
根據所述分析結果和/或用戶配置信息,生成配置指令。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于云盾智慧安全科技有限公司,未經云盾智慧安全科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010861335.8/1.html,轉載請聲明來源鉆瓜專利網。





