[發明專利]數據同步方法、系統、終端設備及存儲介質

在審

• 申請號: 202010719272.2
• 申請日: 2020-07-23
• 公開（公告）號: CN111966747A
• 公開（公告）日: 2020-11-20
• 發明（設計）人: 陳宏亮;馮展;任飛;朱師俊
• 申請（專利權）人: 深圳市科脈技術股份有限公司
• 主分類號: G06F16/27
• 分類號: G06F16/27;G06F16/28
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 羅琳麗

1.一種數據同步方法，其特征在于，所述方法包括：

將目標數據庫中的原表存儲至關系型數據庫中，并對所述原表進行數據變更監測；

若所述原表發生數據變更后生成新表，則記錄所述原表的變更數據，并根據所述變更數據生成數據變更日志；

根據所述數據變更日志分別對所述新表和所述關系型數據庫進行數據定位，得到變更定位數據和待變更數據，所述變更定位數據是所述新表對應于所述原表的變化數據，所述待變更數據是所述變更數據在所述關系型數據庫中對應的存儲數據；

根據所述變更定位數據對所述待變更數據進行數據變更，以保障所述目標數據庫與所述關系型數據庫之間的數據同步。

2.如權利要求1所述的數據同步方法，其特征在于，所述記錄所述原表的變更數據，并根據所述變更數據生成數據變更日志，包括：

將所述原表與所述新表進行信息比對，并根據信息比對結果獲取所述原表與所述新表之間每一行數據的變更信息，得到所述變更數據，所述變更數據包括所述變更信息在所述原表中對應的被變更位置和所述變更信息在所述新表中對應的表信息；

根據所述變更數據生成binlog日志，得到所述數據變更日志。

3.如權利要求2所述的數據同步方法，其特征在于，所述根據所述數據變更日志分別對所述新表和所述關系型數據庫進行數據定位，得到變更定位數據和待變更數據，包括：

獲取所述數據變更日志中的SQL語句信息，并根據所述SQL語句信息對所述新表對應的表信息進行定位，得到所述變更定位數據；

根據所述原表中對應的被變更位置對所述關系型數據庫進行數據定位，得到所述待變更數據。

4.如權利要求3所述的數據同步方法，其特征在于，所述根據所述變更定位數據對所述關系型數據庫進行數據變更，包括：

獲取所述目標數據庫與所述關系型數據庫之間的關聯關系，并根據所述關聯關系對所述變更定位數據進行關聯轉換，得到關系轉換數據；

將所述關系轉換數據對所述待變更數據進行數據替換。

5.如權利要求1所述的數據同步方法，其特征在于，所述根據所述變更數據生成數據變更日志之后，還包括：

獲取所述變更數據的變更時間，并根據所述變更時間和預設時間間隔對所述數據變更日志進行分表存儲。

6.如權利要求1所述的數據同步方法，其特征在于，所述根據所述變更定位數據對所述關系型數據庫進行數據變更之后，還包括：

查詢所述新表在所述關系型數據庫中對應存儲的列表，并分別對所述新表和所述列表進行數據量比對和數據明細比對；

若所述新表與所述列表的數據量不相同，則針對所述新表發送數據量同步錯誤提示；

若所述新表與所述列表的數據明細不相同，則針對所述新表發送數據明細同步錯誤提示。

7.如權利要求1至6任一項所述的數據同步方法，其特征在于，所述方法還包括：

若所述原表在閾值時間內未發生數據變更，則將所述原表發送至備份數據庫，并在所述目標數據庫中刪除所述原表。

8.一種數據同步系統，其特征在于，包括：

原表存儲模塊，用于將目標數據庫中的原表存儲至關系型數據庫中，并對所述原表進行數據變更監測；

變更日志生成模塊，用于若所述原表發生數據變更后生成新表，則記錄所述原表的變更數據，并根據所述變更數據生成數據變更日志；

數據定位模塊，用于根據所述數據變更日志分別對所述新表和所述關系型數據庫進行數據定位，得到變更定位數據和待變更數據，所述變更定位數據是所述新表對應于所述原表的變化數據，所述待變更數據是所述變更數據在所述關系型數據庫中對應的存儲數據；

數據變更模塊，用于根據所述變更定位數據對所述待變更數據進行數據變更，以保障所述目標數據庫與所述關系型數據庫之間的數據同步。

9.一種終端設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，其特征在于，所述處理器執行所述計算機程序時實現如權利要求1至7任一項所述的方法。

10.一種存儲介質，所述存儲介質存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現如權利要求1至7任一項所述的方法。