[發明專利]數據遷移的方法和裝置

在審

• 申請號: 201710334373.6
• 申請日: 2017-05-12
• 公開（公告）號: CN108874828A
• 公開（公告）日: 2018-11-23
• 發明（設計）人: 潘新宇
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 中原信達知識產權代理有限責任公司 11219
• 代理人: 張一軍;趙靜

1.一種數據遷移的方法，其特征在于，包括：

將源數據庫中的數據全量同步至新數據庫；

在所述全量同步的過程中，監聽所述源數據庫中數據的變更情況，若所述源數據庫中的數據發生變更，則將所述新數據庫中對應的已實現同步的數據進行更新；

按照用戶維度計算遷移率，當某用戶的數據的遷移率達到100％時，將所述某用戶對應的數據庫從源數據庫切換至新數據庫。

2.根據權利要求1所述的方法，其特征在于，在將源數據庫中的數據全量同步至新數據庫之前，所述方法還包括：根據所述新數據庫中表的設計結構，將源數據庫中的數據進行結構轉換。

3.根據權利要求1所述的方法，其特征在于，將源數據庫中的數據全量同步至新數據庫包括：利用自增主鍵ID，順序選擇所述源數據庫中的預設條數的數據，同步至新數據庫，直至完成全量同步。

4.根據權利要求3所述的方法，其特征在于，所述方法還包括：利用ACK機制判斷每次順序選擇的所述源數據庫中的預設條數的數據是否已完成同步。

5.根據權利要求3所述的方法，其特征在于，在將每次順序選擇的所述源數據庫中的預設條數的數據完成同步之后，所述方法還包括：將所述預設條數的數據的全部自增主鍵ID記錄至遷移記錄數據庫中，并將所述預設條數的數據的最后一條數據的自增主鍵ID作為下次順序選擇數據的起始位移ID記錄在遷移記錄數據庫中。

6.根據權利要求1所述的方法，其特征在于，監聽所述源數據庫中數據的變更情況包括：基于binlog機制，監聽所述源數據庫中數據的變更情況。

7.根據權利要求5所述的方法，其特征在于，將所述新數據庫中對應的已實現同步的數據進行更新包括：判斷發生變更的數據的自增主鍵ID是否存在于遷移記錄數據庫中，若存在，則對所述新數據庫中對應的數據進行更新，若不存在則不更新。

8.根據權利要求1所述的方法，其特征在于，所述方法還包括：利用可視化界面，實時監控數據遷移進度。

9.一種數據遷移的裝置，其特征在于，包括：

全量同步模塊，用于將源數據庫中的數據全量同步至新數據庫；

增量同步模塊，用于在所述全量同步的過程中，監聽所述源數據庫中數據的變更情況，若所述源數據庫中的數據發生變更，則將所述新數據庫中對應的已實現同步的數據進行更新；

切換模塊，用于按照用戶維度計算遷移率，當某用戶的數據的遷移率達到100％時，將所述某用戶對應的數據庫從源數據庫切換至新數據庫。

10.根據權利要求9所述的裝置，其特征在于，所述全量同步模塊還用于：根據所述新數據庫中表的設計結構，將源數據庫中的數據進行結構轉換。

11.根據權利要求9所述的裝置，其特征在于，所述全量同步模塊還用于：利用自增主鍵ID，順序選擇所述源數據庫中的預設條數的數據，同步至新數據庫，直至完成全量同步。

12.根據權利要求11所述的裝置，其特征在于，所述全量同步模塊還用于：利用ACK機制判斷每次順序選擇的所述源數據庫中的預設條數的數據是否已完成同步。

13.根據權利要求11所述的裝置，其特征在于，所述裝置還包括：遷移記錄模塊，用于將所述預設條數的數據的全部自增主鍵ID記錄至遷移記錄數據庫中，并將所述預設條數的數據的最后一條數據的自增主鍵ID作為下次順序選擇數據的起始位移ID記錄在遷移記錄數據庫中。

14.根據權利要求9所述的裝置，其特征在于，所述增量同步模塊還用于：基于binlog機制，監聽所述源數據庫中數據的變更情況。