[發(fā)明專利]一種基于分布式存儲的數(shù)據(jù)備份歸檔方法和系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201911120266.9
• 申請日: 2019-11-15
• 公開（公告）號: CN111125002B
• 公開（公告）日: 2023-10-27
• 發(fā)明（設計）人: 盧萬龍
• 申請（專利權）人: 盧萬龍
• 主分類號: G06F16/11
• 分類號: G06F16/11;G06F16/182;G06F11/14;G06F3/06
• 代理公司: 北京華清迪源知識產(chǎn)權代理有限公司 11577
• 代理人: 朱芳

1.一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述方法包括：

配置存儲桶維度的自定義初始參數(shù)；

獲取用戶信息中的桶列表，并存入第一字典；

獲取資源池中的元數(shù)據(jù)信息，并根據(jù)所述元數(shù)據(jù)信息與桶列表中的桶名進行關聯(lián)，組成第二字典；

獲取資源池中的對象數(shù)據(jù)信息，通過比較對象數(shù)據(jù)信息的時間戳與自定義初始參數(shù)中的時間大小，來判斷是否進行文件備份歸檔；

通過比較已備份歸檔的文件與原文件大小，以及，已備份歸檔文件與信息摘要算法md5值的相似度，來判斷是否刪除原文件。

2.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述自定義初始參數(shù)包括備份歸檔范圍和每一個存儲桶的文件歸檔備份時間。

3.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述獲取用戶信息中的桶列表，具體包括：

通過對象存儲接口獲取分布式存儲中的用戶信息，所述用戶信息包括密鑰，根據(jù)密鑰獲取每個用戶的桶列表。

4.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述元數(shù)據(jù)信息包括桶ID和桶名，通過字典的賦值功能將元數(shù)據(jù)信息中的桶名與用戶信息桶列表中的桶名進行匹配關聯(lián)，合并成第二字典。

5.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述對象數(shù)據(jù)信息包括桶ID、數(shù)據(jù)文件名稱和數(shù)據(jù)文件時間戳。

6.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述判斷是否進行文件備份歸檔的方法，具體包括：

如果對象數(shù)據(jù)信息中的數(shù)據(jù)文件時間戳大于自定義設置的備份時間，則將桶ID與第二字典進行合并，組成第三字典，所述第三字典包括密鑰、桶名和數(shù)據(jù)文件名；

如果對象數(shù)據(jù)信息的數(shù)據(jù)文件時間戳小于自定義設置的備份時間，則丟棄該對象數(shù)據(jù)，繼續(xù)下一個數(shù)據(jù)處理。

7.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，所述方法還包括：通過自定義配置參數(shù)遍歷文件數(shù)量和字典中關鍵信息，開啟多線程進行數(shù)據(jù)備份歸檔。

8.如權利要求1所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法，其特征在于，判斷是否刪除所述原文件的方法，具體包括：如果已備份歸檔的文件與原文件大小相同，且已備份歸檔文件與信息摘要算法md5值完全相同，則刪除原文件，繼續(xù)下一個處理，反之，保留原文件。

9.一種基于分布式存儲的數(shù)據(jù)備份歸檔方法系統(tǒng)，其特征在于，所述系統(tǒng)包括：至少一個處理器和至少一個存儲器；

所述存儲器用于存儲一個或多個程序指令；

所述處理器，用于運行一個或多個程序指令，用以執(zhí)行如權利要求1-8任一項所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法。

10.一種計算機可讀存儲介質(zhì)，其特征在于，所述存儲介質(zhì)中包含一個或多個程序指令，所述一個或多個程序指令用于被一種路測單元執(zhí)行如權利要求1-8任一項所述的一種基于分布式存儲的數(shù)據(jù)備份歸檔方法。