[發明專利]一種日志采集分析方法、裝置以及系統

在審

• 申請號: 201710840731.0
• 申請日: 2017-09-18
• 公開（公告）號: CN107612730A
• 公開（公告）日: 2018-01-19
• 發明（設計）人: 王洪添;楊宏林;朱斌;劉瑞慧;周立軻;李興凱;王崗
• 申請（專利權）人: 山東浪潮云服務信息科技有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L29/08
• 代理公司: 濟南信達專利事務所有限公司37100
• 代理人: 李世喆

1.一種日志采集分析方法，其特征在于，包括：

確定至少一個待采集日志業務系統以及每一個所述待采集日志業務系統對應的日志類型；

根據所確定的每一個所述待采集日志業務系統對應的日志類型，獲取每一個所述待采集日志業務系統的日志文件；

對所獲取的每一個所述日志文件進行解析；

將解析后的每一個所述日志文件歸檔到外部的存儲設備；

對歸檔后的每一個所述日志文件進行分析。

2.根據權利要求1所述的方法，其特征在于，

任意一個第一待采集日志業務系統對應的日志類型為中間件監控日志類型時，

所述根據所確定的每一個所述待采集日志業務系統對應的日志類型，獲取每一個所述待采集日志業務系統的日志文件，包括：

根據所確定的第一待采集日志業務系統對應的中間件監控日志類型，與所述第一待采集日志業務系統通過基于超文本傳輸協議HTTP的JSON格式的通信協議建立連接；

判斷所述第一待采集日志業務系統對應的待采集日志文件的狀態參數是否達到預設的狀態值，如果是，通過所述基于HTTP的JSON格式的通信協議從所述待采集日志文件中獲取所述第一待采集日志業務系統的日志文件；

其中，所述狀態參數包括累計寫入時間或累計寫入數據量；

當所述狀態參數為累計寫入時間時，所述狀態值為時間閾值；當所述狀態參數為累計寫入數據量時，所述狀態值為數據量閾值；

和/或，

任意一個第二待采集日志業務系統對應的日志類型為非結構化日志類型時，

所述根據所確定的每一個所述待采集日志業務系統對應的日志類型，獲取每一個所述待采集日志業務系統的日志文件，包括：

根據所確定的第二待采集日志業務系統對應的非結構化日志類型，與所述第二待采集日志業務系統通過文件傳輸協議ftp通信協議或安全文件傳送協議sftp通信協議建立連接；

判斷所述第二待采集日志業務系統對應的待采集日志文件的數量是否達到預設的數量閾值，如果是，通過所述ftp通信協議或sftp通信協議從所述待采集日志文件中獲取所述第二待采集日志業務系統的日志文件；

和/或，

任意一個第三待采集日志業務系統對應的日志類型為結構化日志時，

所述根據所確定的每一個所述待采集日志業務系統對應的日志類型，獲取每一個所述待采集日志業務系統的日志文件，包括：

根據所確定的第三待采集日志業務系統對應的結構化日志類型，確定日志文件提取規則，其中，所述日志文件提取規則包括設定文件格式、設定時間、設定數據量、設定字符長度、設定字符名稱中的至少一種或多種；

根據所述日志文件提取規則從所述第三待采集日志業務系統對應的待采集日志文件中獲取所述第三待采集日志業務系統的日志文件。

3.根據權利要求1所述的方法，其特征在于，

所述對所獲取的每一個所述日志文件進行解析，包括：

預先設定至少一個關鍵字；

將所獲取的每一個所述日志文件解析為字符串格式的日志文件；

根據所述至少一個關鍵字，為所解析的字符串格式的日志文件添加至少一個目標關鍵字。

4.根據權利要求1所述的方法，其特征在于，

所述對歸檔后的每一個所述日志文件進行分析，包括：

判斷歸檔后的每一個所述日志文件是否符合預先設定的分析規則，如果否，生成報警信息；

所述分析規則包括：不包括預先設定的報錯字符串、關鍵字對應的內容不為空值、生成時間是預先設定的時間、數據量為預先設定的數據量中的至少一種或多種。

5.根據權利要求4所述的方法，其特征在于，

所述報警信息包括：短信報警信息、郵件報警信息以及界面報警信息中的任意一種或多種。

6.一種日志采集分析裝置，其特征在于，包括：

確定單元，用于確定至少一個待采集日志業務系統以及每一個所述待采集日志業務系統對應的日志類型；

獲取單元，用于根據所述確定單元所確定的每一個所述待采集日志業務系統對應的日志類型，獲取每一個所述待采集日志業務系統的日志文件；

解析單元，用于對所述獲取單元所獲取的每一個所述日志文件進行解析；

歸檔單元，用于將所述解析單元解析后的每一個所述日志文件歸檔到外部的存儲設備；

分析單元，用于對所述歸檔單元歸檔后的每一個所述日志文件進行分析。