[發明專利]數據遷移方法及數據遷移裝置

有效

• 申請號: 201410340044.9
• 申請日: 2014-07-16
• 公開（公告）號: CN105468473B
• 公開（公告）日: 2019-03-01
• 發明（設計）人: 王超;陳磊;陳營;陳宗志
• 申請（專利權）人: 北京奇虎科技有限公司;奇智軟件（北京）有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14;G06F16/21;H04L29/08
• 代理公司: 北京華沛德權律師事務所 11302
• 代理人: 劉杰

1.一種數據遷移方法，用于對鍵值系統各節點中的數據進行遷移，該方法包括：

將各節點中的數據劃分成多個分區并將各節點中存放相同數據的分區賦予相同的分區標識；

當需要進行數據遷移時，確定需要進行數據遷移的節點的遷出分區；

關閉所確定的遷出分區并以分區為單位將所確定的遷出分區中的數據遷移至遷入數據節點中；

將遷入到遷入數據節點中與所述遷出分區中的數據對應的數據確定為一分區并為所確定的分區賦予與遷出節點相同的分區標識；

為所述分區標識相同的遷入分區生成第一操作日志文件；

確定待遷移數據同步完畢，讀取所述遷出分區中最后更新的第二操作日志文件以及其它節點中存儲所述待遷移數據的分區中最新的第三操作日志文件；

比對第三操作日志文件與第二操作日志文件，將在第三操作日志文件中記錄但未在第二操作日志文件中記錄的日志信息復制到所述第一操作日志文件中，并回放到所述第一操作日志文件對應遷入分區的數據庫中。

2.如權利要求1所述的方法，在所述關閉所確定的遷出分區之前，所述方法還包括：

調用鍵值系統的暫離接口。

3.如權利要求1所述的方法，在所述回放到所述第一操作日志文件對應分區的數據庫中之后，所述方法還包括：

刪除所述遷出分區中的待遷移數據。

4.如權利要求1所述的方法，在所述回放到所述第一操作日志文件對應遷入分區的數據庫中之后，所述方法還包括：

在待遷移數據對應的備份集中，加入所述遷入數據節點中與所述分區標識相同的遷入分區，刪除該待遷移數據所在的遷出分區，所述備份集由各節點上存放相同數據或數據副本的分區的集合構成，每一備份集中的各分區具有相同的分區標識。

5.如權利要求4所述的方法，在所述加入所述遷入數據節點中與所述分區標識相同的遷入分區之后，所述方法還包括：

將訪問待遷移數據所在節點中的遷出分區的入口地址變更為所述遷入數據節點中與所述分區標識相同的遷入分區的入口地址。

6.如權利要求1所述的方法，所述方法還包括：

將預設的更新數據的存儲地址從所述待遷移數據所在遷出分區的存儲地址變更為所述遷入數據節點中與所述分區標識相同的遷入分區的存儲地址。

7.如權利要求1所述的方法，所述方法還包括：

將所述遷出分區中存儲的預先設置時間點之前寫入的數據同步至遷入數據節點中；

獲取在所述預先設置時間點之后，與確定的分區標識相同的分區的操作日志文件，所述操作日志文件至少包括寫入與所述確定的分區標識相同的分區的數據；

根據獲取的操作日志文件更新所述遷入數據節點中與所述分區標識相同的遷入分區中的數據。

8.如權利要求1所述的方法，所述待遷移數據的信息為待遷移數據條數，所述分區的信息為分區存儲的數據條數。

9.如權利要求1所述的方法，所述待遷移數據的信息為待遷移數據容量，所述分區的信息為分區存儲容量。