[發明專利]基于數據庫精細比對的數據核查方法及裝置

在審

• 申請號: 202210015698.9
• 申請日: 2022-01-07
• 公開（公告）號: CN114528309A
• 公開（公告）日: 2022-05-24
• 發明（設計）人: 鐘鑫;劉兆平;李環亞;趙銘;林鎮鋒;周海
• 申請（專利權）人: 南方電網深圳數字電網研究院有限公司
• 主分類號: G06F16/242
• 分類號: G06F16/242;G06F16/2453;G06F16/2455
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 江銀會

本發明提供了一種基于數據庫精細比對的數據核查方法及裝置，該方法包括：根據源數據庫中的待核查源庫表獲取第一表；確定映射關系表，所述映射關系表包括所述源數據庫中的所述待核查源庫表和所述目標數據庫中與所述待核查源庫表對應的目標庫表的映射信息；當映射關系表中的數據滿足第一預設條件時，根據所述目標數據庫中與所述待核查源庫表對應的所述目標庫表獲取所第二表；將所述第一表和所述第二表和所述映射關系表進行關聯；通過確定出的核查模型得到源數據庫遷移到所述目標數據庫的數據核查結果。可見，本發明能夠在數據從源數據庫遷移到目標數據庫后通過確定出的核查模型對數據進行核查，可提高數據核查效率，并且提高數據核查的準確性。

技術領域

本發明涉及大數據信息技術領域，尤其涉及一種基于數據庫精細比對的數據核查方法及裝置。

背景技術

隨著社會信息化的發展，產生了海量的數據信息，為了保存這些海量的數據信息，目前可通過數據庫實現對這些數據信息進行存儲，當對數據庫進行管理時，存在將數據信息從源數據庫遷移到目標數據庫的需求。

當前，在將數據信息從源數據庫遷移到目標數據庫后，為了保證數據的一致性，目前通常是通過人工來對數據進行核查，以確定數據信息從源數據庫完整準確的遷移到目標數據庫中。然而，實踐發現，當源數據庫中的數據量很大時，通過人工對數據進行核查的過程耗時耗力，使得數據核查效率低；并且，數據的人工核查可能發生錯誤，導致數據庫遷移后的數據核查的準確性不高。

發明內容

本發明所要解決的技術問題在于，提供一種基于數據庫精細比對的數據核查方法及裝置，能夠在數據從源數據庫遷移到目標數據庫后通過確定出的核查模型對數據進行核查，可提高數據核查效率，并且提高數據核查的準確性。

為了解決上述技術問題，本發明第一方面公開了一種基于數據庫精細比對的數據核查方法，所述方法包括：

根據源數據庫中的待核查源庫表，獲取所述待核查源庫表的所有源庫字段，其中，所述待核查源庫表為所述源數據庫中的任一源庫表；

基于確定出的第一SQL語句統計所述待核查源庫表的所有所述源庫字段各自包含的數據對象的數量，得到第一統計結果，將所述第一統計結果記錄在第一表中，并將所述第一表導入到目標數據庫中；

確定映射關系表，并將所述映射關系表導入到所述源數據庫和所述目標數據庫中，其中，所述映射關系表包括所述源數據庫中的所述待核查源庫表和所述目標數據庫中與所述待核查源庫表對應的目標庫表的映射信息；

當所述映射關系表中的數據滿足第一預設條件時，根據所述目標數據庫中與所述待核查源庫表對應的所述目標庫表，獲取所述目標庫表的所有目標庫字段；

基于確定出的第二SQL語句統計所述目標庫表的所有所述目標庫字段各自包含的數據對象的數量，得到第二統計結果，將所述第二統計結果記錄在第二表中；

將所述第一表和所述第二表和所述映射關系表進行關聯；

通過確定出的核查模型得到目標清單，所述目標清單包括所述源數據庫遷移到所述目標數據庫的數據核查結果。

作為一種可選的實施方式，在本發明第一方面中，所述通過確定出的核查模型得到目標清單，所述目標清單包括所述源數據庫遷移到所述目標數據庫的數據核查結果，包括：

將所述第一表中的所述待核查源庫表的每個所述源庫字段包含的數據對象的數量與所述第二表中的與所述待核查源庫表的每個所述源庫字段對應的所述目標庫字段包含的數據對象的數量進行比對，得到第一比對結果；

根據所述第一比對結果，通過確定出的核查模型得到目標清單，所述目標清單包括所述源數據庫遷移到所述目標數據庫的數據核查結果。