[發明專利]一種監控數據質量的方法和裝置

在審

• 申請號: 201711114545.5
• 申請日: 2017-11-13
• 公開（公告）號: CN110019158A
• 公開（公告）日: 2019-07-16
• 發明（設計）人: 李立威;羅翔;游正朋
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/23;G06F11/32
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;陸錦華

1.一種監控數據質量的方法，其特征在于，包括：

以數據計算任務的源數據和/或輸出數據作為待校驗數據；

從預設的數據校驗規則集中獲取所述待校驗數據的校驗規則；

基于所述校驗規則對所述待校驗數據執行數據校驗任務；其中，

所述數據校驗任務與所述數據計算任務異步進行。

2.如權利要求1所述的方法，其特征在于，從預設的數據校驗規則集中獲取所述待校驗數據的校驗規則之后還包括：將所述待校驗數據的校驗規則緩存至全局變量中。

3.如權利要求2所述的方法，其特征在于，從數據校驗規則集中獲取待校驗數據的校驗規則之前還包括：確認所述全局變量中不存在所述待校驗數據的校驗規則；

若所述全局變量中存在所述待校驗數據的校驗規則，則從所述全局變量中調用所述待檢驗數據的校驗規則。

4.如權利要求1所述的方法，其特征在于，還包括：對所述數據校驗規則集中的校驗規則進行如下至少一種操作：增加、刪除、修改。

5.如權利要求1所述的方法，其特征在于，對所述待校驗數據執行數據校驗任務之后還包括：

判斷所述待校驗數據是否校驗通過；

若所述待校驗數據校驗失敗，則進行報警。

6.一種監控數據質量的裝置，其特征在于，包括：

數據校驗模塊，用于以數據計算任務的源數據和/或輸出數據作為待校驗數據，從預設的數據校驗規則集中獲取待校驗數據的校驗規則，基于所述校驗規則對所述待校驗數據執行數據校驗任務；

數據計算模塊，用于執行所述數據計算任務；

其中，所述數據校驗任務與基于所述數據計算任務異步進行。

7.如權利要求6所述的裝置，其特征在于，所述數據校驗模塊還用于：將所述待校驗數據的校驗規則緩存至全局變量中。

8.如權利要求7所述的裝置，其特征在于，所述數據校驗模塊還用于：

從數據校驗規則集中獲取待校驗數據的校驗規則之前，確認所述全局變量中不存在所述待校驗數據的校驗規則；

若所述全局變量中存在所述待校驗數據的校驗規則，則從所述全局變量中調用所述待檢驗數據的校驗規則。

9.如權利要求6所述的裝置，其特征在于，還包括：規則編輯模塊，用于對所述數據校驗規則集中的校驗規則進行編輯進行如下至少一種操作：增加、刪除、修改。

10.如權利要求6所述的裝置，其特征在于，還包括：規則配置模塊，用于配置所述預設的數據校驗規則集。

11.如權利要求6所述的裝置，其特征在于，所述數據校驗模塊還用于：對所述待校驗數據執行數據校驗任務之后，判斷所述待校驗數據是否校驗通過；

所述裝置還包括：報警模塊；若所述待校驗數據校驗失敗，則所述報警模塊進行報警。

12.一種監控數據質量的電子設備，其特征在于，包括：

一個或多個處理器；

存儲裝置，用于存儲一個或多個程序，

當所述一個或多個程序被所述一個或多個處理器執行，使得所述一個或多個處理器實現如權利要求1-5中任一所述的方法。

13.一種計算機可讀介質，其上存儲有計算機程序，其特征在于，所述程序被處理器執行時實現如權利要求1-5中任一所述的方法。