[發明專利]日志監控方法、裝置、電子設備及可讀存儲介質

在審

• 申請號: 202110427695.1
• 申請日: 2021-04-20
• 公開（公告）號: CN113111240A
• 公開（公告）日: 2021-07-13
• 發明（設計）人: 王昌宇
• 申請（專利權）人: 康鍵信息技術（深圳）有限公司
• 主分類號: G06F16/903
• 分類號: G06F16/903;G06F9/50;G06F9/54;G06F11/30
• 代理公司: 深圳市沃德知識產權代理事務所(普通合伙) 44347
• 代理人: 高杰;于志光

本發明涉及數據處理，揭露一種日志監控方法，包括：實時獲取服務器集群各個節點的第一日志集合，對第一日志集合執行清洗處理，得到第二日志集合；將第二日志集合中的日志分配到多個任務池中，對多個任務池執行排序處理，得到任務池序列，對各個任務池中的日志執行排序處理，得到各個任務池對應的日志序列，基于任務池序列及日志序列對多個任務池中的日志排序，得到日志任務隊列；對日志任務隊列中的日志執行關鍵詞匹配處理；當某一指定日志與其對應的關鍵詞集合中某一指定關鍵詞匹配成功時，獲取指定關鍵詞對應的處理策略，執行所述處理策略。本發明還提供一種日志監控裝置、電子設備及可讀存儲介質。本發明實現了及時發現日志中的異常字符。

技術領域

本發明涉及數據處理領域，尤其涉及一種日志監控方法、裝置、電子設備及可讀存儲介質。

背景技術

隨著互聯網技術的發展，服務器集群的應用越來越廣泛，為了保證服務器集群的正常運行，通常需要從硬件層面(例如，CPU負載、內存資源、網卡等)和軟件層面對服務器集群中各個節點進行全面的監控。

當前，通常通過監控服務器集群中各節點對應的日志中是否出現異常字符判斷各節點的軟件系統是否異常，然而因日志的產生量巨大，且服務器集群中不同節點對應不同的系統，導致產生的日志類型不同，從而日志的分析、處理較為緩慢。因此，亟需一種日志監控方法，以及時發現日志中的異常字符。

發明內容

鑒于以上內容，有必要提供一種日志監控方法，旨在及時發現日志中的異常字符。

本發明提供的日志監控方法，包括：

實時獲取服務器集群中各個節點產生的第一日志集合，對所述第一日志集合執行清洗處理，得到各個節點對應的第二日志集合；

確定所述第二日志集合中各個日志的日志類別，根據所述日志類別將所述第二日志集合中的日志分配到多個任務池中，對所述多個任務池執行第一排序處理，得到任務池序列，對各個任務池中的日志執行第二排序處理，得到各個任務池對應的日志序列，基于所述任務池序列及日志序列對所述多個任務池中的日志排序，得到日志任務隊列；

從第一數據庫中獲取各種日志類別的日志對應的關鍵詞集合，基于所述關鍵詞集合對所述日志任務隊列中的日志執行關鍵詞匹配處理；

當某一指定日志與其對應的關鍵詞集合中某一指定關鍵詞匹配成功時，從第二數據庫中獲取所述指定關鍵詞對應的處理策略，執行所述處理策略，并將關鍵詞匹配結果及所述處理策略發送到預設客戶端。

可選的，所述對所述第一日志集合執行清洗處理，得到各個節點對應的第二日志集合，包括：

剔除所述第一日志集合中日志格式不是預設格式的日志，得到第三日志集合；

剔除所述第三日志集合中日志名稱中含有預設字符的日志，得到第二日志集合。

可選的，所述基于所述關鍵詞集合對所述日志任務隊列中的日志執行關鍵詞匹配處理，包括：

將所述日志任務隊列中排序最前的待匹配日志的內容作為待匹配字符串，抽取所述待匹配日志對應的關鍵詞集合中第一個關鍵字作為標準字符串；

將所述待匹配字符串與所述標準字符串左對齊，以標準字符串從左往右的移動方式、以字符從右往左的匹配順序將所述標準字符串與所述待匹配字符串進行匹配，當所述待匹配字符串中出現與所述標準字符串完全匹配的字符串，或者當所述標準字符串的尾部字符與所述待匹配字符串的尾部字符對齊時，結束本次匹配；

抽取所述待匹配日志對應的關鍵詞集合中的下一個關鍵詞作為新的標準字符串繼續與所述待匹配字符串進行匹配，直至無法從所述待匹配日志對應的關鍵詞集合中抽取新的關鍵詞。

可選的，所述以標準字符串從左往右的移動方式、以字符從右往左的匹配順序將所述標準字符串與所述待匹配字符串進行匹配，包括：