[發明專利]Hbase的數據在線遷移方法和裝置

在審

• 申請號: 201711262754.4
• 申請日: 2017-12-04
• 公開（公告）號: CN108038153A
• 公開（公告）日: 2018-05-15
• 發明（設計）人: 劉志杰
• 申請（專利權）人: 北京小度信息科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京睿派知識產權代理事務所(普通合伙) 11597
• 代理人: 劉鋒

1.一種Hbase的數據在線遷移方法，其特征在于，所述方法包括：

從第一時刻開始，將第一集群的數據鏡像到第二集群；

在鏡像結束后的第二時刻，開啟第一集群和第二集群的雙向同步，將第二時刻之后第一集群和第二集群更新的數據在兩個集群之間進行同步；

將從第一時刻到第二時刻的時間段內第一集群更新的數據拷貝到第二集群。

2.根據權利要求1所述的方法，其特征在于，從第一時刻開始，將第一集群的數據鏡像到第二集群包括：

將與第一集群需要被遷移的表相同的表結構創建至第二集群；

控制第一集群獲取需要被遷移的表的快照并將所述快照拷貝到第二集群；

控制第二集群在所述表結構下根據所述快照復位對應的數據。

3.根據權利要求1所述的方法，其特征在于，在鏡像結束后的第二時刻，開啟第一集群和第二集群的雙向同步，將第二時刻之后第一集群和第二集群更新的數據在兩個集群之間進行同步包括：

建立第一集群與第二集群之間的同步復制關系；

為第二時刻之后第一集群和第二集群更新的數據所在的表添加復制屬性；

將被添加復制屬性的表在兩個集群之間進行數據同步更新。

4.根據權利要求1所述的方法，其特征在于，將從第一時刻到第二時刻的時間段內第一集群更新的數據拷貝到第二集群包括：

保持第一集群與第二集群之間的同步復制關系，將從第一時刻到第二時刻的時間段內第一集群更新的數據拷貝到第二集群對應的表。

5.根據權利要求1所述的方法，其特征在于，所述方法還包括：

將針對第一集群被遷移數據的讀訪問和寫訪問切換到第二集群。

6.一種Hbase的數據在線遷移裝置，其特征在于，所述裝置包括：

數據鏡像模塊，用于從第一時刻開始，將第一集群的數據鏡像到第二集群；

雙向同步模塊，用于在鏡像結束后的第二時刻，開啟第一集群和第二集群的雙向同步，將第二時刻之后第一集群和第二集群更新的數據在兩個集群之間進行同步；

拷貝模塊，用于將從第一時刻到第二時刻的時間段內第一集群更新的數據拷貝到第二集群。

7.根據權利要求6所述的裝置，其特征在于，數據鏡像模塊包括：

表結構創建單元，用于將與第一集群需要被遷移的表相同的表結構創建至第二集群；

快照處理單元，用于控制第一集群獲取需要被遷移的表的快照并將所述快照拷貝到第二集群；

數據復位單元，用于控制第二集群在所述表結構下根據所述快照復位對應的數據。

8.根據權利要求6所述的裝置，其特征在于，雙向同步模塊包括：

同步關系建立單元，用于建立第一集群與第二集群之間的同步復制關系；

屬性添加單元，用于為第二時刻之后第一集群和第二集群更新的數據所在的表添加復制屬性；

同步更新單元，用于將被添加復制屬性的表在兩個集群之間進行數據同步更新。

9.一種電子設備，其特征在于，包括存儲器和處理器；所述存儲器用于存儲一條或多條計算機指令，其中，所述一條或多條計算機被所述處理器執行以實現權利要求1至5任意一項所述方法的步驟。

10.一種計算機可讀存儲介質，其上存儲有計算機指令，其特征在于，該指令被處理器執行時實現權利要求1至5任意一項所述方法的步驟。