[發明專利]數據質量管理方法及裝置在審
| 申請號： | 201910089863.3 | 申請日： | 2019-01-30 |
| 公開（公告）號： | CN109902081A | 公開（公告）日： | 2019-06-18 |
| 發明（設計）人： | 程宏亮;張鵬;吳垌沅;李曉燕 | 申請（專利權）人： | 美林數據技術股份有限公司 |
| 主分類號： | G06F16/215 | 分類號： | G06F16/215 |
| 代理公司： | 北京挺立專利事務所(普通合伙) 11265 | 代理人： | 韓暢 |
| 地址： | 710075 陜西省西安市高新區軟*** | 國省代碼： | 陜西;61 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 數據質量管理 應用場景 目標應用 信息技術領域 質量判定規則 場景 獲取目標 目標觸發 判定規則 條件滿足 質量判定 臟數據 篩選 | ||
1.一種數據質量管理方法，其特征在于，所述方法包括：
確定K個應用場景所對應的數據質量判定規則，K≥1；
在目標觸發條件滿足時，確定目標應用場景所對應的判定規則為生效規則；其中，所述目標應用場景為所述K個應用場景其中之一；
獲取目標應用場景下的輸入數據，根據所述生效規則從所述輸入數據中篩選出臟數據。
2.根據權利要求1所述的方法，其特征在于，所述獲取目標應用場景下的輸入數據，包括：
在數據錄入場景下，獲取從前臺界面錄入的數據；
或者，在數據導入場景下，獲取導入數據；
或者，在數據傳入場景下，獲取傳入數據采集接口的數據；
或者，在數據庫讀取場景下，獲取從數據庫讀取的數據。
3.根據權利要求1所述的方法，其特征在于，還包括：
根據篩選出的臟數據生成臟數據的分析報告；
所述分析報告包括臟數據清單、或者臟數據不滿足的判定規則，或者臟數據存在質量問題的字段。
4.根據權利要求1所述的方法，其特征在于，還包括：
獲取計劃參數，所述計劃參數用于指示執行臟數據篩選的頻率、時間或者篩選范圍；
按照所述計劃參數對數據庫中的已有數據重復進行臟數據篩選。
5.根據權利要求1所述的方法，其特征在于，還包括：
根據所述生效規則確定所述輸入數據中存在臟數據時，輸出提示信息；其中，所述提示信息用于請求獲取用于覆蓋所述臟數據的新數據。
6.一種數據質量管理裝置，其特征在于，包括：
定義模塊，用于確定K個應用場景所對應的數據質量判定規則，K≥1；
控制模塊，用于在目標觸發條件滿足時，確定目標應用場景所對應的判定規則為生效規則；其中，所述目標應用場景為所述K個應用場景其中之一；
處理模塊，用于獲取目標應用場景下的輸入數據，根據所述生效規則從所述輸入數據中篩選出臟數據。
7.根據權利要求6所述的裝置，其特征在于，
所述處理模塊，用于在數據錄入場景下，獲取從前臺界面錄入的數據；
或者，所述處理模塊，用于在數據導入場景下，獲取導入數據；
或者，所述處理模塊，用于在數據傳入場景下，獲取傳入數據采集接口的數據；
或者，所述處理模塊，用于在數據庫讀取場景下，獲取從數據庫讀取的數據。
8.根據權利要求6所述的裝置，其特征在于，
所述處理模塊，還用于根據篩選出的臟數據生成臟數據的分析報告；
所述分析報告包括臟數據清單、或者臟數據不滿足的判定規則，或者臟數據存在質量問題的字段。
9.根據權利要求6所述的裝置，其特征在于，
所述處理模塊，還用于獲取計劃參數，按照所述計劃參數對數據庫中的已有數據重復進行臟數據篩選；
其中，所述計劃參數用于指示執行臟數據篩選的頻率、時間或者篩選范圍。
10.根據權利要求6所述的裝置，其特征在于，
所述處理模塊，還用于根據所述生效規則確定所述輸入數據中存在臟數據時，輸出提示信息；
其中，所述提示信息用于請求獲取用于覆蓋所述臟數據的新數據。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于美林數據技術股份有限公司，未經美林數據技術股份有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/201910089863.3/1.html，轉載請聲明來源鉆瓜專利網。
