[發明專利]一種數據監控方法和裝置

在審

• 申請號: 201811485959.3
• 申請日: 2018-12-06
• 公開（公告）號: CN111290927A
• 公開（公告）日: 2020-06-16
• 發明（設計）人: 李希亮
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;郭晗

1.一種數據監控方法，其特征在于，包括：

對數據操作的日志進行預設處理，所述預設處理包括：按照過濾規則過濾所述日志中的數據操作記錄，根據所述過濾的結果統計所述日志對應時段的有效新增數據量；

根據所述預設處理的結果監控數據是否出現異常。

2.根據權利要求1所述的方法，其特征在于，按照過濾規則過濾所述日志中的數據操作記錄的步驟，包括：

將對所述有效新增數據量無影響的數據操作記錄濾除，其中，對所述有效新增數據量無影響的數據操作記錄包括：

對數據執行的數據查詢操作或數據刪除操作的記錄；

對一數據執行的所述數據刪除操作之前，對同一數據執行的特定數據操作的記錄，所述特定數據操作包括數據查詢操作、數據新增操作、數據更新操作中的一種或多種。

3.根據權利要求1所述的方法，其特征在于，所述預設處理還包括：

按照合并規則合并所述日志中的數據操作記錄；

根據所述合并和所述過濾的結果，統計所述日志對應時段的最終數據狀態的信息。

4.根據權利要求3所述的方法，其特征在于，按照合并規則合并所述日志中的數據操作記錄的步驟，包括：

將對同一數據執行兩次或兩次以上數據更新操作的記錄合并；

將對同一數據先后執行數據新增和數據更新操作的記錄合并。

5.根據權利要求1所述的方法，其特征在于，所述預設處理還包括：

根據所述日志中對每一數據的數據操作記錄和數據狀態記錄，生成各數據的數據操作序列和數據狀態序列，并統計所述日志中各類數據操作的頻次。

6.根據權利要求1所述的方法，其特征在于，對數據操作的日志進行預設處理的步驟，包括：

按照所述日志的總行數將所述日志均分成多份，并分別對每份日志進行所述預設處理。

7.一種數據監控裝置，其特征在于，包括：

日志處理模塊，用于對數據操作的日志進行預設處理，所述預設處理包括：按照過濾規則過濾所述日志中的數據操作記錄，根據所述過濾的結果統計所述日志對應時段的有效新增數據量；

數據監控模塊，用于根據所述預設處理的結果監控數據是否出現異常。

8.根據權利要求7所述的裝置，其特征在于，所述日志處理模塊包括日志過濾子模塊，用于：

將對所述有效新增數據量無影響的數據操作記錄濾除，其中，對所述有效新增數據量無影響的數據操作記錄包括：

對數據執行的數據查詢操作或數據刪除操作的記錄；

對一數據執行的所述數據刪除操作之前，對同一數據執行的特定數據操作的記錄，所述特定數據操作包括數據查詢操作、數據新增操作、數據更新操作中的一種或多種。

9.根據權利要求7所述的裝置，其特征在于，所述日志處理模塊包括日志合并子模塊，用于執行所述預設處理，其中：

按照合并規則合并所述日志中的數據操作記錄；

根據所述合并和所述過濾的結果，統計所述日志對應時段的最終數據狀態的信息。

10.根據權利要求9所述的裝置，其特征在于，所述日志合并子模塊包括記錄合并單元，用于：

將對同一數據執行兩次或兩次以上數據更新操作的記錄合并；

將對同一數據先后執行數據新增和數據更新操作的記錄合并。

11.根據權利要求7所述的裝置，其特征在于，所述日志處理模塊包括操作明細統計子模塊，用于執行所述預設處理，其中：

根據所述日志中對每一數據的數據操作記錄和數據狀態記錄，生成各數據的數據操作序列和數據狀態序列，并統計所述日志中各類數據操作的頻次。