[發明專利]一種日志異常的預警方法、裝置、電子設備及存儲介質

在審

• 申請號: 202111362830.5
• 申請日: 2021-11-17
• 公開（公告）號: CN114064434A
• 公開（公告）日: 2022-02-18
• 發明（設計）人: 簡擁軍;金勇;吳澤君;雷發林;常冬冬;高陽;周明宏;王艷華;李國瑩;苑志云;梁曉冬
• 申請（專利權）人: 建信金融科技有限責任公司
• 主分類號: G06F11/34
• 分類號: G06F11/34;G06K9/62;G06V10/75;G06V10/774;G06V10/764
• 代理公司: 北京三友知識產權代理有限公司 11127
• 代理人: 周永君;董驍毅

本發明提供一種日志異常的預警方法、裝置、電子設備及存儲介質，所述方法包括：依次對每條日志數據進行分類和序列化，獲得各個分類標識對應的模板序列；統計每個分類標識對應的模板序列包括的模板標識的數量，基于分類標識對應的模板序列進行預測，獲得分類標識對應的下一條日志數據的預測模板標識；根據分類標識對應的下一條日志數據的預測模板標識和實際模板標識，統計預設時間段內模板標識的數量等于預設數量的分類標識對應的下一條日志數據對應的預測失敗量；若預測失敗量大于設定閾值，則進行日志異常預警。所述裝置用于執行上述方法。本發明實施例提供的日志異常的預警方法、裝置、電子設備及存儲介質，提高了日志異常預警的可靠性。

技術領域

本發明涉及計算機技術領域，具體涉及一種日志異常的預警方法、裝置、電子設備及存儲介質。

背景技術

目前，幾乎所有的后端服務運行時都會實時產生日志數據，記錄后端服務在運行過程中的事件和系統狀態。日志數據在運維監控系統的異常檢測和預警扮演重要作用。

現有技術中，大型在線服務通常由數百名開發和運維人員分別進行開發和維護，開發人員和運維人員傾向于從局部視角來分析日志的異常，因此很容易造成日志分析的不準確。此外，由于日志數量激增，手工分析日志數據異常的方式變得不實際。傳統的自動檢測日志數據異常的方式是基于正則表達式的關鍵字匹配，這種方式需要根據經驗生成關鍵詞庫，由于無法窮舉容易遺漏關鍵詞且容易產生很多噪音，導致異常檢測的可靠性低。

發明內容

針對現有技術中的問題，本發明實施例提供一種日志異常的預警方法、裝置、電子設備及存儲介質，能夠至少部分地解決現有技術中存在的問題。

一方面，本發明提出一種日志異常的預警方法，包括：

依次對每條日志數據進行分類和序列化，獲得各個分類標識對應的模板序列；其中，每條日志數據對應一個分類標識；

統計每個分類標識對應的模板序列包括的模板標識的數量，并基于日志預測模型對模板標識的數量等于預設數量的分類標識對應的模板序列進行預測，獲得模板標識的數量等于預設數量的分類標識對應的下一條日志數據的預測模板標識；其中，所述日志預測模型是基于歷史日志數據預先訓練獲得的；

根據模板標識的數量等于預設數量的分類標識對應的下一條日志數據的預測模板標識和實際模板標識，統計預設時間段內模板標識的數量等于預設數量的分類標識對應的下一條日志數據對應的預測失敗量；

若判斷獲知所述預測失敗量大于設定閾值，則進行日志異常預警。

另一方面，本發明提供一種日志異常的預警裝置，包括：

獲得模塊，用于依次對每條日志數據進行分類和序列化，獲得各個分類標識對應的模板序列；其中，每條日志數據對應一個分類標識；

預測模塊，用于統計每個分類標識對應的模板序列包括的模板標識的數量，并基于日志預測模型對模板標識的數量等于預設數量的分類標識對應的模板序列進行預測，獲得模板標識的數量等于預設數量的分類標識對應的下一條日志數據的預測模板標識；其中，所述日志預測模型是基于歷史日志數據預先訓練獲得的；

統計模塊，用于根據模板標識的數量等于預設數量的分類標識對應的下一條日志數據的預測模板標識和實際模板標識，統計預設時間段內模板標識的數量等于預設數量的分類標識對應的下一條日志數據對應的預測失敗量；

預警模塊，用于在判斷獲知所述預測失敗量大于設定閾值之后，進行日志異常預警。

再一方面，本發明提供一種電子設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，所述處理器執行所述程序時實現上述任一實施例所述日志異常的預警方法的步驟。

又一方面，本發明提供一種計算機可讀存儲介質，其上存儲有計算機程序，該計算機程序被處理器執行時實現上述任一實施例所述日志異常的預警方法的步驟。