[發明專利]一種檢測數據質量的方法以及檢測數據質量的裝置

在審

• 申請號: 201811083363.0
• 申請日: 2018-09-17
• 公開（公告）號: CN109491990A
• 公開（公告）日: 2019-03-19
• 發明（設計）人: 高東升;付銓;梅綱
• 申請（專利權）人: 武漢達夢數據庫有限公司
• 主分類號: G06F16/215
• 分類號: G06F16/215;G06F16/2455;G06F16/2458
• 代理公司: 深圳市六加知識產權代理有限公司 44372
• 代理人: 向彬

1.一種檢測數據質量的方法，其特征在于，所述檢測數據質量的方法包括：

獲取待檢測數據以及所述待檢測數據的數據類型和/或屬性；

依據所述待檢測數據的數據類型和/或屬性，配置規則匹配組合，其中，所述規則匹配組合包括至少一個檢測規則；

依據所述規則匹配組合對所述待檢測數據進行質量檢測，以篩選出正常數據以及問題數據；

將所述正常數據以及所述問題數據傳送至目的端，并依據所述問題數據輸出質量檢測報告。

2.根據權利要求1所述的檢測數據質量的方法，其特征在于，所述依據所述規則匹配組合對所述待檢測數據進行質量檢測，以篩選出正常數據以及問題數據包括：

解析所述待檢測數據，以獲取多個目標檢測字段；

依據所述規則匹配組合，依次判斷確定所述多個目標檢測字段是否滿足所述規則匹配組合；

若所述目標檢測字段滿足所述規則匹配組合中的全部檢測規則，則標記所述目標檢測字段為正常數據；

若所述目標檢測字段違反所述規則匹配組合中的任一檢測規則，則標記所述目標檢測字段為問題數據。

3.根據權利要求1所述的檢測數據質量的方法，其特征在于，所述依據所述規則匹配組合對所述待檢測數據進行質量檢測，以篩選出正常數據以及問題數據還包括：

依據所述規則匹配組合對所述待檢測數據進行質量檢測，以篩選出正常數據以及問題數據；

按照預設的輸出類型，輸出對應的所述正常數據以及問題數據，以便依據所述輸出類型分析統計所述問題數據。

4.根據權利要求3所述的檢測數據質量的方法，其特征在于，所述預設的輸出類型包括輸出違反指定檢測規則的數據、輸出滿足規則匹配組合的數據、輸出違反至少一個檢測規則的數據、輸出違反全部檢測規則的數據或輸出攜帶有檢測標記的全部數據中的一種或多種。

5.根據權利要求1所述的檢測數據質量的方法，其特征在于，所述問題數據中攜帶有標簽信息，所述標簽信息包括批次標識、問題數據總量以及問題數據所違反的檢測規則；

所述將所述正常數據以及所述問題數據傳送至目的端，并依據所述問題數據輸出質量檢測報告包括：

將所述正常數據以及所述問題數據傳送至目的端；

解析所述問題數據，獲取問題數據的批次標識、問題數據總量以及問題數據所違反的檢測規則，以輸出質量檢測報告。

6.根據權利要求1所述的檢測數據質量的方法，其特征在于，所述獲取待檢測數據以及所述待檢測數據的數據類型和/或屬性包括：

獲取待檢測數據，并對所述待檢測數據進行解析，得到所述待檢測數據的關鍵字段。

7.根據權利要求6所述的檢測數據質量的方法，其特征在于，所述依據所述待檢測數據的數據類型和/或屬性，配置規則匹配組合，其中，所述規則匹配組合包括至少一個檢測規則包括：

依據所述待檢測數據的關鍵字段，配置與所述關鍵字段相關聯的至少一個檢測規則，整合所述至少一個檢測規則得到規則匹配組合。

8.根據權利要求6或7所述的檢測數據質量的方法，其特征在于，所述關鍵字段包括身份證號、日期時間、郵件名稱或郵政編碼中的一種或多種。

9.根據權利要求1～7任一項所述的檢測數據質量的方法，其特征在于，所述規則匹配組合包括用于檢測字段內容是否符合規則的檢測規則、用于檢測字段內容長度是否符合規則的檢測規則、用于檢測郵政編碼的格式是否符合規則、用于檢測日期時間是否符合規則的檢測規則或用于檢測身份證號是否符合規則的檢測規則中的一項或者多項。

10.一種檢測數據質量的裝置，其特征在于，包括至少一個處理器；以及，與所述至少一個處理器通信連接的存儲器；其中，所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被程序設置為執行如權利要求1～9任一項所述的檢測數據質量的方法。