[發明專利]日志數據處理方法和裝置

在審

• 申請號: 201811408036.8
• 申請日: 2018-11-23
• 公開（公告）號: CN109743188A
• 公開（公告）日: 2019-05-10
• 發明（設計）人: 王振乾;李濤
• 申請（專利權）人: 麒麟合盛網絡技術股份有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;G06F17/24
• 代理公司: 北京國昊天誠知識產權代理有限公司 11315
• 代理人: 姜鳳巖;南霆

1.一種日志數據處理方法，其特征在于，包括：

根據日志傳輸請求獲取目標日志數據，并確定所述目標日志數據所屬的目標業務場景；

獲取所述目標業務場景對應的字段替換表；其中，所述字段替換表中記錄有所述目標業務場景對應的日志字段的字段標識，以及所述字段標識對應的替換字符，所述替換字符的長度小于對應的所述字段標識的長度；

利用所述字段替換表，對所述目標日志數據中的日志字段的字段標識進行替換，以縮短所述目標日志數據中的日志字段的字段標識的長度；其中，所述目標日志數據中的日志字段包括所述目標業務場景對應的日志字段；

向日志數據接收方傳輸替換后的所述目標日志數據；其中，所述目標日志數據接收方具有訪問所述字段替換表的權限。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

確定所述目標業務場景對應的多個日志字段，以及所述多個日志字段中每個日志字段的字段標識；

為所述多個日志字段中每個日志字段的字段標識生成相對應的替換字符；

利用所述多個日志字段的字段標識，以及，所述多個日志字段中每個日志字段的字段標識對應的替換字符，組合得到所述目標業務場景對應的字段替換表。

3.根據權利要求2所述的方法，其特征在于，為所述多個日志字段中每個日志字段的字段標識生成相對應的替換字符，包括：

在MYSQL數據庫中記錄所述多個日志字段中每個日志字段的字段標識，利用MYSQL數據庫的自增ID功能，為所述多個日志字段中每個日志字段的字段標識生成相對應的替換字符。

4.根據權利要求1所述的方法，其特征在于，利用所述字段替換表，對所述目標日志數據中的日志字段的字段標識進行替換，包括：

在所述字段替換表中查找所述目標日志數據中的日志字段的字段標識，并獲取查找到的字段標識對應的替換字符；

在所述目標日志數據中，利用所述查找到的字段標識對應的替換字符替換所述查找到的字段標識。

5.根據權利要求4所述的方法，其特征在于，所述方法還包括：

在利用所述字段替換表，對所述目標日志數據中的日志字段的字段標識進行替換之后，若確定所述目標日志數據中存在未被替換的字段標識，則為所述未被替換的字段標識生成相對應的替換字符；

在所述目標日志數據中，利用所述未被替換的字段標識對應的替換字符替換所述未被替換的字段標識，并將所述未被替換的字段標識和所述未被替換的字段標識對應的替換字符記錄在所述字段替換表中。

6.根據權利要求1所述的方法，其特征在于，所述目標日志數據包括多條子數據，所述目標日志數據中的日志字段位于各條所述子數據中；所述方法還包括：

在利用所述字段替換表，對所述目標日志數據中的日志字段的字段標識進行替換之前，根據各條子數據的格式和/或各條子數據的標識，在所述目標日志數據中確定問題子數據并刪除。

7.根據權利要求1至6任一項所述的方法，其特征在于，向日志數據接收方傳輸替換后的所述目標日志數據，包括：

確定當前的網絡傳輸速率，根據預設的網絡傳輸速率范圍和字段優先級閾值之間的對應關系，確定所述當前的網絡傳輸速率對應的目標字段優先級閾值；

確定替換后的所述目標日志數據中各個字段的字段優先級，并在替換后的所述目標日志數據中確定字段優先級高于或等于所述目標字段優先級閾值的第一字段，向日志數據接收方傳輸替換后的所述第一字段的字段標識和字段取值。

8.根據權利要求1至6任一項所述的方法，其特征在于，向日志數據接收方傳輸替換后的所述目標日志數據，包括：

根據預設的各業務場景和各數據傳輸協議之間的對應關系，確定所述目標業務場景對應的目標傳輸協議；

利用所述目標傳輸協議向日志數據接收方傳輸替換后的所述目標日志數據。