[發明專利]基于日志文件的監控方法、系統、設備及可讀存儲介質

有效

• 申請號: 202110483490.5
• 申請日: 2021-04-30
• 公開（公告）號: CN113176978B
• 公開（公告）日: 2023-07-21
• 發明（設計）人: 許佳興;黃河;葉奇
• 申請（專利權）人: 平安壹錢包電子商務有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 北京英特普羅知識產權代理有限公司 11015
• 代理人: 饒文彬

1.一種基于日志文件的監控方法，其特征在于，所述方法包括：

實時采集目標終端集群中每一個終端的日志文件并存儲到消息隊列中；

依次從所述消息隊列中拉取符合目標字段的目標日志文件，并提取所述目標日志文件中的內容字段；

將預設的監控規則對所述內容字段進行匹配，以篩選出匹配的目標日志文件，得到目標日志文件集；

根據預設的監聽規則分析所述目標日志文件集，并根據分析結果生成監控結果；

所述將預設的監控規則對所述內容字段進行匹配，以篩選出匹配的目標日志文件，得到目標日志文件集包括：

基于預設的正則表達式對每一個所述目標日志文件的內容字段進行模糊匹配，以提取候選字段；

通過敏感信息識別規則對所述候選字段進行識別，篩選出匹配的候選字段對應的目標日志文件，得到目標日志文件集，所述預設的監控規則包括所述預設的正則表達式與所述敏感信息識別規則；

所述根據預設的監聽規則分析所述目標日志文件集，并根據分析結果生成監控結果包括：

獲取所述目標日志文件集中的相同日志文件名稱的日志文件；

求和計算所述相同日志文件名稱的日志文件的出現次數；

若所述日志文件的出現次數滿足預先設置的監聽規則，生成日志文件對應的終端的監控結果。

2.如權利要求1所述的基于日志文件的監控方法，其特征在于，所述實時采集目標終端集群中每一個終端的日志文件數據并存儲到消息隊列中之前，包括：

控制監控程序根據預先設置的數據采集規則收集每一個所述終端上應用程序產生的日志文件，所述數據采集規則包括實時采集規則；

將所述日志文件存儲于所述目標終端集群中的每一個終端中。

3.如權利要求2所述的基于日志文件的監控方法，其特征在于，所述實時采集目標終端集群中每一個終端的日志文件并存儲到消息隊列中包括：

向所述監控程序發送日志采集指令，以控制所述監控程序根據所述日志采集指令獲取每一個所述終端上的日志文件；

將采集到的所述日志文件存儲到預設的消息隊列中。

4.如權利要求1所述的基于日志文件的監控方法，其特征在于，所述根據預設的監聽規則分析所述目標日志文件集，并根據分析結果生成監控結果之后，還包括：

將所述分析結果存儲于時序數據庫中；

通過所述時序數據庫將所述分析結果生成報表發送給目標用戶進行查看。

5.如權利要求4所述的基于日志文件的監控方法，其特征在于，所述根據預設的監聽規則分析所述目標日志文件集，并根據分析結果生成監控結果之后，還包括：

從配置管理中心獲取目標用戶的消息渠道；

將所述監控結果通過所述消息渠道發送給所述目標用戶進行查看。

6.一種基于日志文件的監控系統，其特征在于，所述系統包括：

采集模塊，用于實時采集目標終端集群中每一個終端的日志文件并存儲到消息隊列中；

提取模塊，用于依次從所述消息隊列中拉取符合目標字段日志文件，并提取所述日志文件中的內容字段；

匹配模塊，用于將預設的監控規則對所述內容字段進行匹配，以篩選出匹配的日志文件，得到目標日志文件集；

分析模塊，用于根據預設的監聽規則分析所述目標日志文件集，并根據分析結果生成監控結果；

所述匹配模塊還用于：

基于預設的正則表達式對每一個所述目標日志文件的內容字段進行模糊匹配，以提取候選字段；通過敏感信息識別規則對所述候選字段進行識別，篩選出匹配的候選字段對應的目標日志文件，得到目標日志文件集，所述預設的監控規則包括所述預設的正則表達式與所述敏感信息識別規則；

所述分析模塊還用于：

獲取所述目標日志文件集中的相同日志文件名稱的日志文件；求和計算所述相同日志文件名稱的日志文件的出現次數；若所述日志文件的出現次數滿足預先設置的監聽規則，生成日志文件對應的終端的監控結果。