[發明專利]日志分析方法、設備和計算機可讀存儲介質

在審

• 申請號: 201710684810.7
• 申請日: 2017-08-10
• 公開（公告）號: CN107391746A
• 公開（公告）日: 2017-11-24
• 發明（設計）人: 盧道和;楊軍;陳廣勝;陳翼
• 申請（專利權）人: 深圳前海微眾銀行股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 深圳市世紀恒程知識產權代理事務所44287
• 代理人: 胡海國,趙愛蓉

技術領域

本發明涉及大數據領域，尤其涉及一種日志分析方法、設備和計算機可讀存儲介質。

背景技術

隨著通信技術的發展，集群中各種通信設備產生的數據越來越多，當集群產生大量日志，并上報系統中，若是上報的日志過多，無法及時監控服務是否正常運行，不能及時發現服務存在的問題，不能及時恢復服務。

發明內容

本發明的主要目的在于提供一種日志分析方法、設備和計算機可讀存儲介質，旨在解決現有的日志分析方式，無法及時監控服務是否正常運行，不能及時發現服務存在的問題，不能及時恢復服務的技術問題。

為實現上述目的，本發明提供一種日志分析方法，所述日志分析方法包括：

采集集群中各個終端設備發送的日志；

對采集的日志進行過濾歸類處理，以得到各個類別的日志；

通過預存的統計規則對各個類別的日志進行統計分析，以得到各個類別的日志對應的統計分析結果；

采用預存指標對日志的統計分析結果進行校驗，在有日志的統計分析結果不符合預存指標時，輸出告警信息。

可選地，所述采集集群中各個終端設備發送的日志的步驟包括：

通過預設的服務接口實時采集集群中各個終端設備發送的日志，其中，通過所述服務接口接收到的日志是預設標準格式的日志。

可選地，所述對采集的日志進行過濾歸類處理，以得到各個類別的日志的步驟包括：

定時查詢采集到的日志中攜帶的屬性信息；

根據日志中攜帶的屬性信息，對日志進行過濾分類處理，以得到各個類別的日志。

可選地，所述根據日志中攜帶的屬性信息，對日志進行過濾分類處理，以得到各個類別的日志的步驟包括：

確定預設的任務類型中包含的屬性信息，根據所述任務類型的屬性信息，對采集的日志中不包含所述任務類型的屬性信息的日志進行過濾，以得到包含有所述任務類型的屬性信息的日志；

對包含有所述任務類型的屬性信息的日志，按照屬性信息進行分類，以將同一個屬性信息的日志歸為一類，從而得到各個類別的日志。

可選地，所述通過預存的統計規則對各個類別的日志進行統計分析，以得到各個類別的日志對應的統計分析結果的步驟包括：

按照資源消耗情況對每個類別的日志進行劃分，以將每個類別的日志分成多份日志；

確定每個類別的日志對應的任務類型，并獲取確定的每個任務類型對應的統計規則；

啟動多個進程，由各個進程采用每個任務類型對應的統計規則，對對應的每個類別中的多份日志進行統計分析，以得到每個類別的日志對應的統計分析結果。

可選地，所述采用預存指標對日志的統計分析結果進行校驗，在有日志的統計分析結果不符合預存指標時，輸出告警信息的步驟包括：

提取各個類別的日志對應的預存指標閾值；

將各個類別的日志對應的統計分析結果與對應的預存指標閾值進行比較；

在有日志的統計分析結果超出該類日志對應的預存指標閾值時，輸出告警信息。

可選地，所述通過預存的統計規則對各個類別的日志進行統計分析，以得到各個類別的日志對應的統計分析結果的步驟之后，所述日志分析方法還包括：

將各個類別的日志對應的統計分析結果存儲到時間序列數據庫中，以便在所述時間序列數據庫中進行日志的查詢。

可選地，所述日志分析方法應用于日志分析設備中，日志分析設備執行的日志分析的過程同步在備份設備中，以在所述日志分析設備故障時，由所述備份設備提供服務。

此外，為實現上述目的，本發明還提供一種日志分析設備，所述日志分析設備包括處理器、存儲器及存儲在所述存儲器上并可在所述處理器上運行的日志分析程序，所述日志分析程序被所述處理器執行時實現如上文所述的日志分析方法的步驟。

此外，為實現上述目的，本發明還提供一種計算機可讀存儲介質，所述計算機可讀存儲介質上存儲有日志分析程序，所述日志分析程序被處理器執行時實現如上文所述的日志分析方法的步驟。