[發明專利]分布式數據遷移方法、系統和電子設備

在審

• 申請號: 202010468771.9
• 申請日: 2020-05-28
• 公開（公告）號: CN111694517A
• 公開（公告）日: 2020-09-22
• 發明（設計）人: 林媛
• 申請（專利權）人: 新浪網技術（中國）有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F16/11
• 代理公司: 北京國昊天誠知識產權代理有限公司 11315
• 代理人: 許振新

1.一種分布式數據遷移方法，其特征在于，包括：

從包含至少一個遷移任務的遷移任務隊列中選取目標遷移任務，所述遷移任務由數據遷出設備根據待遷出數據生成，其中，所述目標遷移任務是由資源使用率低于第一預設資源使用率的目標數據遷出設備生成的遷移任務；

根據所述目標遷移任務確定目標數據遷入設備，所述目標數據遷入設備的資源使用率低于第二預設資源使用率；

向所述目標數據遷入設備發送同步指令，以指示所述目標數據遷入設備根據所述同步指令從所述目標數據遷出設備同步所述待遷出數據；

獲取所述目標數據遷入設備的同步狀態，所述同步狀態用于表征執行數據同步的進度，在所述目標數據遷入設備的同步狀態滿足預設同步狀態標準時，根據所述目標數據遷入設備修改所述待遷出數據的地址指向。

2.如權利要求1所述的方法，其特征在于，所述目標遷移任務包括所述目標數據遷出設備的類型信息；

其中，根據所述目標遷移任務確定目標數據遷入設備，包括：

根據所述目標數據遷出設備的類型信息，將與所述目標數據遷出設備的類型信息相符的至少一個存儲設備確定為數據遷入設備，所述數據遷入設備與所述目標數據遷出設備的相似度大于預設相似度閾值；

根據各數據遷入設備的資源使用率，從至少一個所述數據遷入設備中確定所述目標數據遷入設備。

3.如權利要求1所述的方法，其特征在于，向所述目標數據遷入設備發送同步指令，以指示所述目標數據遷入設備根據所述同步指令從所述目標數據遷出設備同步所述待遷出數據，包括：

向所述目標數據遷入設備發送包含遷移資源使用率標準的同步指令，以指示所述目標數據遷入設備根據所述遷移資源使用率標準從所述目標數據遷出設備同步所述待遷出數據；

其中，所述遷移資源使用率標準包括以下至少一項：

所述目標數據遷出設備被讀取數據時的資源使用率閾值、所述目標數據遷入設備寫入數據時的資源使用率閾值。

4.如權利要求1所述的方法，其特征在于，在向所述目標數據遷入設備發送同步指令之前，還包括：

監聽所述目標數據遷入設備的各同級遷入設備的同步狀態，所述目標數據遷入設備的同級遷入設備的上游節點與所述目標數據遷入設備的上游節點相同；

根據各同級遷入設備的同步狀態生成總資源使用率，所述總資源使用率用于表征各同級遷入設備執行數據遷移使用的資源量與各同級遷入設備的資源總量的比值；

確認所述總資源使用率小于預設總資源使用率閾值。

5.如權利要求1～4任一項所述的方法，其特征在于，獲取所述目標數據遷入設備的同步狀態，包括：

根據預設時間周期向所述目標數據遷入設備下發問詢指令，以指示所述目標數據遷入設備反饋所述同步狀態。

6.如權利要求1～4任一項所述的方法，其特征在于，獲取所述目標數據遷入設備的同步狀態，包括：

接收所述目標數據遷入設備在完成同步后發送的同步狀態。

7.一種分布式數據遷移系統，其特征在于，包括：

數據遷出設備，根據待遷出數據生成遷移任務，并將所述遷移任務提交至遷移任務隊列中；

控制節點，從包含至少一個遷移任務的遷移任務隊列中選取目標遷移任務，其中，所述目標遷移任務是由資源使用率低于第一預設資源使用率的目標數據遷出設備生成的遷移任務；根據所述目標遷移任務確定目標數據遷入設備，所述目標數據遷入設備的資源使用率低于第二預設資源使用率；向所述目標數據遷入設備發送同步指令；獲取所述目標數據遷入設備的同步狀態，所述同步狀態用于表征執行數據同步的進度，在所述目標數據遷入設備的同步狀態滿足預設同步狀態標準時，根據所述目標數據遷入設備修改所述待遷出數據的地址指向；

目標數據遷入設備，根據接收到的同步指令從所述目標數據遷出設備同步所述待遷出數據。