[發明專利]數據同步方法、系統、終端設備及存儲介質在審

申請號：	202010719272.2	申請日：	2020-07-23
公開（公告）號：	CN111966747A	公開（公告）日：	2020-11-20
發明（設計）人：	陳宏亮;馮展;任飛;朱師俊	申請（專利權）人：	深圳市科脈技術股份有限公司
主分類號：	G06F16/27	分類號：	G06F16/27;G06F16/28
代理公司：	深圳中一聯合知識產權代理有限公司 44414	代理人：	羅琳麗
地址：	518000 廣東省深圳市前海深港合作區南山***	國省代碼：	廣東;44
權利要求書：	查看更多	說明書：	查看更多
摘要：
搜索關鍵詞：	數據同步方法系統終端設備存儲介質
鉆瓜網技術展會專利詞庫專利權人專利榜在售專利公布日期熱門專利

【說明書】：

本申請提供了一種數據同步方法、系統、終端設備及存儲介質，該方法包括：將目標數據庫中的原表存儲至關系型數據庫中，對原表進行數據變更監測；若原表發生數據變更后生成新表，則記錄原表的變更數據，根據變更數據生成數據變更日志；根據數據變更日志分別對新表和關系型數據庫進行數據定位得到變更定位數據和待變更數據；根據變更定位數據對待變更數據進行數據變更，以保障目標數據庫與關系型數據庫之間的數據同步。本申請通過根據變更數據生成數據變更日志，根據數據變更日志對新表和關系型數據庫進行數據定位，即無需在新表中添加時間戳和索引，也即無需變更新表的數據，也能達到對新表和關系型數據庫的數據定位效果，提高了數據同步的準確性。

技術領域

本申請屬于數據同步技術領域，尤其涉及一種數據同步方法、系統、終端設備及存儲介質。

背景技術

隨著大數據時代的到來，數據庫由小型化向大型化發展，由集中式向分布式發展，海量數據的出現和數據結構的改變，給各行各業在管理和分析處理中帶來了巨大的挑戰，從而使得數據庫的數據同步成為一個重要的研究方向。

關系型數據庫廣泛地應用于數據庫中數據的存儲和查詢，關系型數據庫是指采用了關系模型對數據進行組織的數據庫，其以行和列的形式存儲數據，現有技術中，為保障目標數據庫與關系型數據庫之間數據同步的準確性，均是通過在目標數據庫中的新表上添加時間戳和索引，通過時間戳進行變更數據的定位，并根據變更數據的定位結果對關系型數據庫進行數據變更。

現有的目標數據庫與關系型數據庫的數據同步過程中，由于需要對新表添加時間戳和索引，容易導致新表的數據變化，進而降低了數據存儲和數據同步的準確性。

發明內容

本申請實施例提供了一種數據同步方法、系統、終端設備及存儲介質，旨在解決現有的目標數據庫與關系型數據庫的數據同步過程中，由于需要對新表添加時間戳和索引，所導致的數據同步準確性差的問題。

第一方面，本申請實施例提供了一種數據同步方法，所述方法包括：

將目標數據庫中的原表存儲至關系型數據庫中，并對所述原表進行數據變更監測；

若所述原表發生數據變更后生成新表，則記錄所述原表的變更數據，并根據所述變更數據生成數據變更日志；

根據所述數據變更日志分別對所述新表和所述關系型數據庫進行數據定位，得到變更定位數據和待變更數據，所述變更定位數據是所述新表對應于所述原表的變化數據，所述待變更數據是所述變更數據在所述關系型數據庫中對應的存儲數據；

根據所述變更定位數據對所述待變更數據進行數據變更，以保障所述目標數據庫與所述關系型數據庫之間的數據同步。

本申請實施例與現有技術相比存在的有益效果是：通過根據變更數據生成數據變更日志，并根據數據變更日志分別對新表和關系型數據庫進行數據定位得到變更定位數據和待變更數據的設計，即無需在新表中添加時間戳和索引，也即無需變更新表的數據，也能達到對新表和關系型數據庫的數據定位效果，提高了數據同步的準確性。

進一步地，所述記錄所述原表的變更數據，并根據所述變更數據生成數據變更日志，包括：

將所述原表與所述新表進行信息比對，并根據信息比對結果獲取所述原表與所述新表之間每一行數據的變更信息，得到所述變更數據，所述變更數據包括所述變更信息在所述原表中對應的被變更位置和所述變更信息在所述新表中對應的表信息；

根據所述變更數據生成binlog日志，得到所述數據變更日志。