[發明專利]一種日志數據處理方法和裝置

有效

• 申請號: 201510547853.1
• 申請日: 2015-08-31
• 公開（公告）號: CN105183625B
• 公開（公告）日: 2018-04-13
• 發明（設計）人: 蔣凱;王路;吳科
• 申請（專利權）人: 北京奇虎科技有限公司;奇智軟件（北京）有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34;G06F11/30
• 代理公司: 北京市隆安律師事務所11323
• 代理人: 權鮮枝,何立春

技術領域

本發明涉及數據處理領域，特別涉及一種日志數據處理方法和裝置。

背景技術

計算機設備、操作系統和應用程序在運行過程中都會產生許多日志數據，每一行日志可能會記載著日期、時間、使用者及動作等相關操作的描述，用戶可以通過查看并處理日志數據得知計算機設備、操作系統和應用程序的具體運行狀況。然而日志數據數量大、處理方式多樣，對不同類型、不同內容的數據需要采用不同的方式進行處理，比較繁瑣。

例如，某網站的管理員需要處理一批包含服務器主機日志、網站運行日志的日志數據，其中服務器主機日志包含多個服務器主機各自生成的日志，需要按主機名稱進行分類處理；網站運行日志又包括用戶登錄日志和用戶登出日志等。如何高效地對日志數據進行分類，并根據每個分類按不同的規則進行日志數據的處理是需要解決的問題。

發明內容

鑒于上述問題，提出了本發明以便提供一種克服上述問題或者至少部分地解決上述問題的日志數據處理方法和裝置。

依據本發明的一個方面，提供了一種日志數據處理方法，包括：提供可視化的規則編輯界面；接收用戶通過所述規則編輯界面輸入的規則編輯命令，依據規則編輯命令形成相應的規則，將該規則保存到規則庫中；將日志數據與規則庫中的規則進行匹配，如果存在匹配項則生成相應的報警信息。

可選地，所述依據規則編輯命令形成相應的規則包括如下中一種或多種：生成新規則；修改原有的規則；刪除原有的規則。

可選地，該方法進一步包括：在所述規則編輯界面上提供日志分類選擇項；接收用戶通過所述規則編輯界面輸入的規則編輯命令的同時，接收用戶在所述規則編輯界面上選擇的日志分類信息；所述將該規則保存到規則庫中包括：將該規則按照該對應的日志分類信息保存的規則庫中的相應的日志類別規則庫中。

可選地，所述將日志數據與規則庫中的規則進行匹配包括：將該日志數據進行分類；將該日志數據與規則庫中的相應日志類別規則庫中的規則進行匹配。

可選地，該方法進一步包括：在所述規則編輯界面上提供報警級別選項，接收用戶通過所述規則編輯界面輸入的規則編輯命令的同時，接收用戶在所述規則編輯界面上選擇的報警級別信息；所述將該規則保存到規則庫中包括：將該規則與對應報警級別信息一同保存到規則庫中。

可選地，所述如果存在匹配項則生成相應的報警信息包括：根據匹配項中的報警級別信息生成相應級別的報警的信息。

可選地，該方法進一步包括：預設不同級別的報警渠道；將所述報警信息依據其報警級別，通過相應級別的報警渠道發送出去。

可選地，所述規則為針對JSON格式數據的指定一個或多個字段的規則；該方法在將日志數據與規則庫中的規則進行匹配之前進一步包括：將日志數據轉換為JSON格式數據；所述將日志數據與規則庫中的規則進行匹配包括：將日志數據對應的JSON格式數據的指定一個或多個字段與規則庫中的規則進行匹配。

可選地，該方法進一步包括：在所述規則編輯界面上提供規則類別選項，接收用戶通過所述規則編輯界面輸入的規則編輯命令的同時，接收用戶在所述規則編輯界面上選擇的規則類別選項信息；其中，所述規則類別選項中包括第一類別規則和第二類別規則；所述規則庫包括：第一類規則庫和第二類規則庫。

所述將該規則保存到規則庫中包括：將該規則依據其對應的規則類別選項信息保存到第一類規則庫或第二類規則庫中。

可選地，所述將日志數據與規則庫中的規則進行匹配包括：實時獲取產生的日志數據，將實時獲取的所述日志數據與第一類規則庫中的規則進行匹配；將實時獲取的所述日志數據存入日志數據庫中；分析日志數據庫中的日志數據，判斷是否存在與第二類規則庫中的規則匹配的情況。

依據本發明的另一方面，提供了一種日志數據處理裝置，包括：

編輯界面提供單元，適于提供可視化的規則編輯界面；接收單元，適于接收用戶通過所述規則編輯界面輸入的規則編輯命令，依據規則編輯命令形成相應的規則，將該規則保存到規則庫中；存儲單元，適于保存規則庫；匹配處理單元，適于將日志數據與規則庫中的規則進行匹配，如果存在匹配項則生成相應的報警信息。

可選地，所述接收單元，適于依據規則編輯命令執行如下中一種或多種操作：生成新規則；修改原有的規則；刪除原有的規則。

可選地，所述編輯界面提供單元，還適于在所述規則編輯界面上提供日志分類選擇項；所述接收單元，適于在接收用戶通過所述規則編輯界面輸入的規則編輯命令的同時，接收用戶在所述規則編輯界面上選擇的日志分類信息，并將該規則按照該對應的日志分類信息保存的規則庫中的相應的日志類別規則庫中。