[發明專利]用于備份數據的方法、設備和計算機程序產品

有效

• 申請號: 201711023126.0
• 申請日: 2017-10-27
• 公開（公告）號: CN109726037B
• 公開（公告）日: 2023-07-21
• 發明（設計）人: 楊利鋒;高健;鄒勇;徐鑫磊;奉昌玉;賈瑞勇
• 申請（專利權）人: 伊姆西IP控股有限責任公司
• 主分類號: G06F11/14
• 分類號: G06F11/14
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 王茂華

1.一種用于備份數據的方法，包括：

響應于從備份服務器接收到待備份的數據流，由管理節點將所述數據流分割為多個數據分段；

由所述管理節點將所述多個數據分段分發到至少一個計算節點，所述管理節點不同于每個計算節點；

其中將所述多個數據分段分發到所述至少一個計算節點包括：從所述至少一個計算節點確定所述備份服務器到來自所述至少一個計算節點中的第一計算節點的預先綁定，

其中響應于將所述多個數據分段分發到所述至少一個計算節點，主去重任務由所述第一計算節點執行，并且

其中在由所述第一計算節點執行所述主去重任務期間，唯一地標識來自所述多個數據分段中的相應數據分段的哈希被計算，所述哈希在所述第一計算節點的本地哈希緩存中被查找，并且響應于所述哈希在所述本地哈希緩存中未被命中，所述哈希被發送到所述管理節點；

響應于在所述管理節點處從所述第一計算節點接收到所述相應數據分段的所述哈希，由所述管理節點執行二次去重任務，由所述管理節點執行的所述二次去重任務包括：

在所述管理節點的全局哈希緩存中查找所述哈希，所述全局哈希緩存存儲備份存儲設備中數據的哈希，其中查找所述哈希包括訪問來自所述管理節點的所述全局哈希緩存；以及

響應于在所述管理節點的所述全局哈希緩存中未命中所述哈希，將所述哈希添加到所述全局哈希緩存中，以及向所述第一計算節點發送在所述備份存儲設備中存儲所述相應數據分段的指示。

2.根據權利要求1所述的方法，還包括：

響應于在所述管理節點處從來自所述至少一個計算節點中的第二計算節點接收到來自所述多個數據分段中的另一數據分段的哈希，并且在所述全局哈希緩存中命中從所述第二計算節點接收到的所述哈希，由所述管理節點向所述第二計算節點發送丟棄所述另一數據分段的指示。

3.根據權利要求1所述的方法，將所述多個數據分段發送到所述至少一個計算節點還包括：

確定所述第一計算節點的有效性；以及

響應于所述第一計算節點有效，將所述多個數據分段發送到所述第一計算節點。

4.根據權利要求1所述的方法，還包括：

響應于從來自所述至少一個計算節點中的第二計算節點接收到第二數據分段的第二哈希，在所述管理節點的所述全局哈希緩存中查找所述第二哈希，所述第二哈希唯一地標識由所述第二計算節點生成的所述第二數據分段；

響應于在所述管理節點的所述全局哈希緩存中未命中所述第二哈希，將所述第二哈希添加到所述全局哈希緩存中，以及向所述第二計算節點發送在所述備份存儲設備中存儲所述第二數據分段的第二指示。

5.根據權利要求4所述的方法，還包括：

響應于從所述第一計算節點接收到第三數據分段的第三哈希，在所述管理節點的所述全局哈希緩存中查找所述第三哈希，所述第三哈希唯一地標識由所述第一計算節點生成的所述第三數據分段；

響應于在所述管理節點的所述全局哈希緩存中命中所述第三哈希，避免將所述第三哈希添加到所述全局哈希緩存；以及

向所述第一計算節點發送丟棄所述第三數據分段的第三指示。

6.根據權利要求1所述的方法，其中所述備份服務器、所述管理節點、所述第一計算節點、和所述備份存儲設備中的每一個被包括在橫向擴展數據備份架構中，并且所述方法還包括：

將來自所述至少一個計算節點中的第二計算節點和第二備份存儲設備添加到所述橫向擴展數據備份架構。

7.根據權利要求6所述的方法，其中響應于將所述多個數據分段分發到至少一個計算節點，由所述第二計算節點執行第二主去重任務，并且

其中在由所述第二計算節點執行所述第二主去重任務期間，唯一地標識來自所述多個數據分段中的第二數據分段的第二哈希被計算，所述第二哈希在所述第二計算節點的第二本地哈希緩存中被查找，并且響應于所述第二哈希在所述第二本地哈希緩存中未被命中，所述第二哈希被發送到所述管理節點。