[發(fā)明專(zhuān)利]一種數(shù)據(jù)質(zhì)量檢查方法、檢查裝置、檢查設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202310619769.0
• 申請(qǐng)日: 2023-05-29
• 公開(kāi)（公告）號(hào): CN116644078A
• 公開(kāi)（公告）日: 2023-08-25
• 發(fā)明（設(shè)計(jì)）人: 郭群
• 申請(qǐng)（專(zhuān)利權(quán)）人: 中國(guó)銀行股份有限公司
• 主分類(lèi)號(hào): G06F16/23
• 分類(lèi)號(hào): G06F16/23;G06F16/215;G06F18/214;G06F18/24;G06N20/00
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 馬天琪

本申請(qǐng)公開(kāi)一種數(shù)據(jù)質(zhì)量檢查方法、檢查裝置、檢查設(shè)備及存儲(chǔ)介質(zhì)，可應(yīng)用于金融領(lǐng)域或其他領(lǐng)域，方法包括：從應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中確定待檢查數(shù)據(jù)；應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中存有應(yīng)用系統(tǒng)運(yùn)行過(guò)程中產(chǎn)生的數(shù)據(jù)；根據(jù)待檢查數(shù)據(jù)的數(shù)據(jù)名稱(chēng)，從數(shù)據(jù)字典中確定待檢查數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)標(biāo)準(zhǔn)；數(shù)據(jù)名稱(chēng)與數(shù)據(jù)標(biāo)準(zhǔn)在數(shù)據(jù)字典中是按照一一對(duì)應(yīng)的關(guān)系進(jìn)行保存的；將待檢查數(shù)據(jù)和數(shù)據(jù)標(biāo)準(zhǔn)輸入應(yīng)用系統(tǒng)對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查模型，對(duì)待檢查數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢查；從數(shù)據(jù)質(zhì)量檢查模型中獲取待檢查數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查結(jié)果；對(duì)于相同的數(shù)據(jù)使用相同的數(shù)據(jù)標(biāo)準(zhǔn)進(jìn)行數(shù)據(jù)質(zhì)量檢查，進(jìn)而保障了業(yè)務(wù)系統(tǒng)數(shù)據(jù)庫(kù)中數(shù)據(jù)質(zhì)量的一致性。

技術(shù)領(lǐng)域

本申請(qǐng)涉及數(shù)據(jù)處理領(lǐng)域，具體涉及一種數(shù)據(jù)質(zhì)量檢查方法、檢查裝置、檢查設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

數(shù)據(jù)質(zhì)量是企業(yè)有效管理業(yè)務(wù)數(shù)據(jù)的保障，對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢查是保障數(shù)據(jù)質(zhì)量的有效手段。

相關(guān)技術(shù)中，數(shù)據(jù)質(zhì)量檢查是由系統(tǒng)開(kāi)發(fā)人員根據(jù)自身對(duì)數(shù)據(jù)標(biāo)準(zhǔn)的理解制定數(shù)據(jù)質(zhì)量檢查規(guī)則，并寫(xiě)入數(shù)據(jù)檢查程序中，目前存在由于質(zhì)量檢查規(guī)則不一致導(dǎo)致數(shù)據(jù)的質(zhì)量檢查結(jié)果存在偏差的問(wèn)題。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種數(shù)據(jù)質(zhì)量檢查方法、檢查裝置、檢查設(shè)備及存儲(chǔ)介質(zhì)，提高了應(yīng)用系統(tǒng)中數(shù)據(jù)質(zhì)量的一致性。

有鑒于此，本申請(qǐng)第一方面提供了一種數(shù)據(jù)質(zhì)量檢查方法，所述方法包括：

從應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中確定待檢查數(shù)據(jù)；所述應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中存有應(yīng)用系統(tǒng)運(yùn)行過(guò)程中產(chǎn)生的數(shù)據(jù)；

根據(jù)所述待檢查數(shù)據(jù)的數(shù)據(jù)名稱(chēng)，從數(shù)據(jù)字典中確定所述待檢查數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)標(biāo)準(zhǔn)；所述數(shù)據(jù)名稱(chēng)與所述數(shù)據(jù)標(biāo)準(zhǔn)在所述數(shù)據(jù)字典中是按照一一對(duì)應(yīng)的關(guān)系進(jìn)行保存的；

將所述待檢查數(shù)據(jù)和所述數(shù)據(jù)標(biāo)準(zhǔn)輸入所述應(yīng)用系統(tǒng)對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查模型，對(duì)所述待檢查數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢查；

從所述數(shù)據(jù)質(zhì)量檢查模型中獲取所述待檢查數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查結(jié)果；所述數(shù)據(jù)質(zhì)量檢查結(jié)果用于描述所述待檢查數(shù)據(jù)是否符合所述數(shù)據(jù)標(biāo)準(zhǔn)。

可選地，所述數(shù)據(jù)質(zhì)量檢查模型是通過(guò)如下方法訓(xùn)練的：

從所述應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中采集訓(xùn)練數(shù)據(jù)，并從所述數(shù)據(jù)字典中獲取所述訓(xùn)練數(shù)據(jù)對(duì)應(yīng)的所述數(shù)據(jù)標(biāo)準(zhǔn)；

當(dāng)所述訓(xùn)練數(shù)據(jù)滿(mǎn)足所述數(shù)據(jù)標(biāo)準(zhǔn)時(shí)，將所述訓(xùn)練數(shù)據(jù)標(biāo)記為合規(guī)數(shù)據(jù)，獲得訓(xùn)練數(shù)據(jù)集；

基于所述訓(xùn)練集訓(xùn)練機(jī)器學(xué)習(xí)分類(lèi)模型，獲得所述數(shù)據(jù)質(zhì)量檢查模型。

可選地，所述方法進(jìn)一步包括：

當(dāng)所述數(shù)據(jù)字典更新時(shí)，基于更新后的所述數(shù)據(jù)字典，更新所述數(shù)據(jù)質(zhì)量檢查模型。

可選地，所述方法進(jìn)一步包括：

設(shè)置數(shù)據(jù)質(zhì)量檢查周期；

所述將所述待檢查數(shù)據(jù)和所述數(shù)據(jù)標(biāo)準(zhǔn)輸入所述應(yīng)用系統(tǒng)對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查模型，對(duì)所述待檢查數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢查包括：

每隔所述數(shù)據(jù)質(zhì)量檢查周期，將所述待檢查數(shù)據(jù)和所述數(shù)據(jù)標(biāo)準(zhǔn)輸入所述應(yīng)用系統(tǒng)對(duì)應(yīng)的數(shù)據(jù)質(zhì)量檢查模型，對(duì)所述待檢查數(shù)據(jù)進(jìn)行數(shù)據(jù)質(zhì)量檢查。

本申請(qǐng)第二方面提供了一種數(shù)據(jù)質(zhì)量檢查裝置，所述裝置包括：

數(shù)據(jù)確定單元，用于：從應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中確定待檢查數(shù)據(jù)；所述應(yīng)用系統(tǒng)數(shù)據(jù)庫(kù)中存有應(yīng)用系統(tǒng)運(yùn)行過(guò)程中產(chǎn)生的數(shù)據(jù)；

標(biāo)準(zhǔn)確定單元，用于：根據(jù)所述待檢查數(shù)據(jù)的數(shù)據(jù)名稱(chēng)，從數(shù)據(jù)字典中確定所述待檢查數(shù)據(jù)對(duì)應(yīng)的數(shù)據(jù)標(biāo)準(zhǔn)；所述數(shù)據(jù)名稱(chēng)與所述數(shù)據(jù)標(biāo)準(zhǔn)在所述數(shù)據(jù)字典中是按照一一對(duì)應(yīng)的關(guān)系進(jìn)行保存的；