[發明專利]數據質量稽核方法、裝置、設備和存儲介質

在審

• 申請號: 201911320946.5
• 申請日: 2019-12-19
• 公開（公告）號: CN113010502A
• 公開（公告）日: 2021-06-22
• 發明（設計）人: 徐攀登;黃曉婧;韓翼
• 申請（專利權）人: 阿里巴巴集團控股有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 錢秀茹

1.一種數據質量稽核方法，其特征在于，包括：

確定稽核規則和所述稽核規則對應的數據配置信息，所述數據配置信息用于確定存儲數據庫中的待稽核數據，所述稽核規則用于評價所述待稽核數據的數據質量；

依據目標數據庫和所述數據配置信息，生成數據獲取任務；

依據所述數據獲取任務獲取所述待稽核數據；

將所述待稽核數據按照所述稽核規則進行稽核處理，得到稽核結果。

2.根據權利要求1所述的方法，其特征在于，所述確定稽核規則和所述稽核規則對應的數據配置信息，包括：

確定所述稽核規則和所述稽核規則的類型；

按照所述稽核規則的類型確定對應的至少一個數據配置信息。

3.根據權利要求2所述的方法，其特征在于，所述依據目標數據庫和所述數據配置信息，生成數據獲取任務，包括：

依據所述目標數據庫和與所述目標數據庫對應的目標數據配置信息，生成所述數據獲取任務，所述目標數據配置信息依據所述目標數據庫的存儲類型從所述至少一個數據配置信息中確定。

4.根據權利要求3所述的方法，其特征在于，所述依據所述目標數據庫和與所述目標數據庫對應的目標數據配置信息，生成所述數據獲取任務，包括：

依據所述目標數據配置信息和所述目標數據庫的存儲規則，生成所述數據獲取任務。

5.根據權利要求4所述的方法，其特征在于，所述依據所述目標數據配置信息和所述目標數據庫的存儲規則，生成所述數據獲取任務，包括：

依據所述目標數據配置信息的類型，確定對應的數據解析器；

依據所述數據解析器和所述目標數據庫的存儲規則，對所述目標數據配置信息進行解析，生成所述數據獲取任務。

6.根據權利要求5所述的方法，其特征在于，所述依據所述數據解析器和所述目標數據庫的存儲規則，對所述目標數據配置信息進行解析，生成所述數據獲取任務，包括：

依據所述數據解析器和所述目標數據庫的存儲規則，解析所述目標數據配置信息，以得到所述待稽核數據的存儲位置；

依據所述待稽核數據的目標數據范圍和所述待稽核數據的目標存儲位置，生成所述數據獲取任務，所述數據獲取任務用于按照所述數據范圍從所述存儲位置獲取所述待稽核數據。

7.根據權利要求1所述的方法，其特征在于，所述依據所述數據獲取任務獲取所述待稽核數據，包括：

將所述數據獲取任務發送至所述數據配置信息對應的目標計算處理端，所述目標計算處理端用于執行所述數據獲取任務以獲得所述待稽核數據；

獲取所述待稽核數據。

8.根據權利要求1所述的方法，其特征在于，所述待稽核數據從同一類別的存儲數據庫中獲取，所述將所述待稽核數據按照所述稽核規則進行稽核處理，得到稽核結果，包括：

按照所述稽核規則，將所述待稽核數據與閾值進行對比，得到所述稽核結果。

9.根據權利要求1所述的方法，其特征在于，所述待稽核數據從不同類別的存儲數據庫中獲取，所述將所述待稽核數據按照所述稽核規則進行稽核處理，得到稽核結果，包括：

按照所述稽核規則，將所述待稽核數據與閾值進行對比、將從不同類別的存儲數據庫中獲取的待稽核數據進行對比，得到所述稽核結果。

10.一種數據質量稽核方法，其特征在于，包括：

確定稽核規則和所述稽核規則對應的數據配置信息，所述數據配置信息用于確定數據源中的待稽核數據，所述稽核規則用于評價所述待稽核數據的數據質量；

依據目標數據源和所述數據配置信息，生成數據獲取任務；

依據所述數據獲取任務獲取所述待稽核數據；

將所述待稽核數據按照所述稽核規則進行稽核處理，得到稽核結果。