[發明專利]數據同步系統及方法

在審

• 申請號: 201710556355.2
• 申請日: 2017-06-30
• 公開（公告）號: CN107391635A
• 公開（公告）日: 2017-11-24
• 發明（設計）人: 劉暢
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京市浩天知識產權代理事務所(普通合伙)11276
• 代理人: 宋菲,劉云貴

1.一種數據同步系統，包括：調用模塊，以及多個與所述調用模塊分別相連的數據同步模塊，其中，

所述調用模塊，適于確定與接收到的數據同步請求相對應的目標數據庫的類型，向與該目標數據庫的類型相對應的數據同步模塊發送調用請求；

每個數據同步模塊分別對應于至少一種類型的目標數據庫，適于在接收到所述調用模塊的調用請求時，確定與所述調用請求相對應的目標數據庫，并將待同步的數據同步至所述目標數據庫。

2.根據權利要求1所述的系統，其中，所述系統進一步包括：

數據同步接口，用于連接所述調用模塊以及各個數據同步模塊；

則所述調用模塊具體適于：通過所述數據同步接口向與該目標數據庫的類型相對應的數據同步模塊發送調用請求。

3.根據權利要求2所述的系統，其中，所述數據同步接口通過虛函數實現。

4.根據權利要求1-3任一所述的系統，其中，當所述與接收到的數據同步請求相對應的目標數據庫為多個不同類型的數據庫時，

所述調用模塊具體適于：確定與所述多個不同類型的數據庫相對應的各個數據同步模塊，分別向每個數據同步模塊發送對應的調用請求。

5.根據權利要求1-4任一所述的系統，其中，所述多個與所述調用模塊分別相連的數據同步模塊包括以下中的至少兩個：

與MySQL類型的目標數據庫相對應的數據同步模塊、與Redis類型的目標數據庫相對應的數據同步模塊、與Mongo類型的目標數據庫相對應的數據同步模塊、以及與Greenplum類型的目標數據庫相對應的數據同步模塊。

6.根據權利要求1-5任一所述的系統，其中，所述數據同步模塊具體適于：

獲取與原數據庫相對應的備份數據，在目標數據庫中創建與所述備份數據相對應的全量數據；

確定所述備份數據的備份時間點，根據所述原數據庫對應的日志文件確定與所述備份時間點相對應的日志點位信息；

從所述日志文件中獲取在所述日志點位信息之后產生的日志記錄，確定與所述日志記錄相對應的數據操作；

針對所述目標數據庫中存儲的全量數據執行所述數據操作，直至所述目標數據庫與所述原數據庫中的數據同步。

7.根據權利要求6所述的系統，其中，所述原數據庫中包括多個數據表，且所述原數據庫對應的日志文件的數量為多個；

則所述數據同步模塊具體適于：創建多個并行執行的進程，每個進程分別對應于至少一個日志文件；每個進程從該進程對應的日志文件中獲取在所述日志點位信息之后產生的日志記錄，確定與所述日志記錄相對應的數據操作；針對所述目標數據庫中存儲的全量數據執行所述數據操作。

8.一種數據同步方法，包括：

確定與接收到的數據同步請求相對應的目標數據庫的類型，向與該目標數據庫的類型相對應的數據同步模塊發送調用請求；

接收到調用請求的數據同步模塊確定與所述調用請求相對應的目標數據庫，并將待同步的數據同步至所述目標數據庫。

9.一種電子設備，包括：處理器、存儲器、通信接口和通信總線，所述處理器、所述存儲器和所述通信接口通過所述通信總線完成相互間的通信；

所述存儲器用于存放至少一可執行指令，所述可執行指令使所述處理器執行如權利要求8中所述的數據同步方法對應的操作。

10.一種計算機存儲介質，所述存儲介質中存儲有至少一可執行指令，所述可執行指令使處理器執行如權利要求8中所述的數據同步方法對應的操作。