[發明專利]一種跨集群對象存儲異步備份方法、裝置和系統

有效

• 申請號: 201910030266.3
• 申請日: 2019-01-14
• 公開（公告）號: CN109840166B
• 公開（公告）日: 2021-03-30
• 發明（設計）人: 張婷;胡升波;何軍
• 申請（專利權）人: 京東數字科技控股有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14;G06F16/27
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 杜志敏;宋志強

1.一種跨集群對象存儲異步備份方法，應用于跨集群對象存儲異步備份系統中的同步服務器上，其特征在于，該方法包括：

從數據庫服務器上獲取同步的數據列表；

將數據列表中的用戶操作對象名稱劃分為多個任務，并下發到緩存隊列中；

針對緩存隊列中本同步服務器處理的任務從主集群服務器獲取對應的用戶操作對象的數據和狀態；

根據獲取的狀態，將獲取的數據備份到從集群服務器；

其中，所述用戶操作對象名稱為主集群服務器通過部署的Openresty服務在主集群服務器成功寫入數據時發送的針對該次操作對象的描述信息，其中，所述主集群服務器通過Openresty服務接收客戶端發送的寫入數據請求，通過部署的對象存儲服務處理寫入數據請求；

其中，當所述狀態為存在或不存在時，所述根據獲取的狀態，將獲取的數據備份到從集群服務器，包括：

若獲取的狀態為存在，則將對應的數據備份到從集群服務器；若獲取的狀態為不存在，則刪除從集群服務器上相應數據。

2.根據權利要求1所述的方法，其特征在于，所述數據庫服務器中針對每個用戶操作對象存儲一條記錄，以replace模式更新每個用戶操作對象的記錄。

3.根據權利要求1所述的方法，其特征在于，

所述用戶操作對象名稱為：類型為增、刪、改的寫入請求對應的用戶操作對象的名稱。

4.根據權利要求1所述的方法，其特征在于，

針對緩存隊列中的任務采用分布式方式處理。

5.根據權利要求1-4任一項所述的方法，其特征在于，所述數據庫服務器與同步服務器、主集群服務器，或從集群服務器為同一服務器，或不同服務器；

所述同步服務器與主集群服務器，或從集群服務器為同一服務器，或不同服務器。

6.一種跨集群對象存儲異步備份裝置，應用于跨集群對象存儲異步備份系統中的同步服務器上，其特征在于，該裝置包括：第一獲取單元、處理單元、第二獲取單元和備份單元；

所述第一獲取單元，用于從數據庫服務器上獲取同步的數據列表；

所述處理單元，用于將所述第一獲取單元獲取的數據列表中的用戶操作對象名稱劃分為多個任務，并下發到緩存隊列中；其中，所述用戶操作對象名稱為主集群服務器通過部署的Openresty服務在主集群服務器成功寫入數據時發送的針對該次操作對象的描述信息，其中，所述主集群服務器通過Openresty服務接收客戶端發送的寫入數據請求，通過部署的對象存儲服務處理寫入數據請求；

所述第二獲取單元，用于針對所述處理單元下發任務的緩存隊列中本同步服務器處理的任務從主集群服務器獲取對應的用戶操作對象的數據和狀態；

所述備份單元，用于根據獲取的狀態，將獲取的數據備份到從集群服務器；

其中，所述備份單元，進一步用于其中，當所述狀態為存在或不存在時，若獲取的狀態為存在，則將對應的數據備份到從集群服務器；若獲取的狀態為不存在，則刪除從集群服務器上相應數據。

7.根據權利要求6所述的裝置，其特征在于，

所述數據庫服務器中針對每個用戶操作對象存儲一條記錄，以replace模式更新每個用戶操作對象的記錄。

8.根據權利要求6所述的裝置，其特征在于，

所述用戶操作對象名稱為：類型為增、刪、改的寫入請求對應的用戶操作對象的名稱。

9.根據權利要求6-8任一項所述的裝置，其特征在于，

針對緩存隊列中的任務采用分布式方式處理。