[發明專利]云存儲數據存儲方法、裝置、系統、設備及存儲介質

在審

• 申請號: 202011301292.4
• 申請日: 2020-11-19
• 公開（公告）號: CN112511612A
• 公開（公告）日: 2021-03-16
• 發明（設計）人: 李朝霞;邢鑫;康楠
• 申請（專利權）人: 中國聯合網絡通信集團有限公司;聯通云數據有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 吳會英;劉芳

本發明實施例提供一種云存儲數據存儲方法、裝置、系統、設備及存儲介質，具體實現方案為：該方法包括：獲取終端的待存儲文件，并根據待存儲文件生成對應的標識信息；根據標識信息查找預設的標識文件數據庫和/或云資源池中是否存在相同的標識信息；其中，云資源池中存儲的所有數據都設有相應的唯一標識信息；若標識文件數據庫或云資源池中存在相同的標識信息，則刪除所述待存儲文件；若標識文件數據庫和所述云資源池中都不存在相同的標識信息，則將所述待存儲文件對應的標識信息存入所述標識文件數據庫中，并將所述待存儲文件存入對應的云資源池。本發明實施例的方法可以降低存儲重復數據的概率，降低存儲資源的浪費。

技術領域

本發明實施例涉及云存儲技術領域，尤其涉及一種云存儲數據存儲方法、裝置、系統、設備及存儲介質。

背景技術

隨著數據量的飛速增長，存儲空間和傳輸速率成為當前網絡存儲領域的一大難題。對于存儲空間，大部分的研究都放在了如何擴大存儲空間上，而對于存儲空間中數據清理的研究則是較少的。據數據統計，在所有備份的數據中，高達80％以上的數據是冗余的，大量的冗余數據占據著大量的存儲空間，造成了大量浪費存儲資源的現象。

目前對于云存儲空間來說，存儲新的待存儲數據普遍是直接存儲的方式，即使云存儲空間中已經存在與該新的待存儲數據相同的數據，也并不影響新的待存儲數據的存儲。

因此，目前的云存儲空間在存儲新的數據時不會進行對應的篩選，導致存儲資源浪費較大。

發明內容

本發明提供一種云存儲數據存儲方法、裝置、系統、設備及存儲介質，用以解決目前的云存儲空間在存儲新的數據時不會進行對應的篩選，導致存儲資源浪費較大的問題。

本發明實施例第一方面提供一種云存儲數據存儲方法，包括：

獲取終端的待存儲文件，并根據所述待存儲文件生成對應的標識信息；

根據所述標識信息查找預設的標識文件數據庫和/或云資源池中是否存在相同的標識信息；其中，所述云資源池中存儲的所有數據都設有相應的唯一標識信息；

若所述標識文件數據庫或所述云資源池中存在相同的標識信息，則刪除所述待存儲文件；

若所述標識文件數據庫和所述云資源池中都不存在相同的標識信息，則將所述待存儲文件對應的標識信息存入所述標識文件數據庫中，并將所述待存儲文件存入對應的云資源池。

進一步地，如上所述的方法，所述標識信息包括文件名信息；

所述根據所述標識信息查找預設的標識文件數據庫和/或云資源池中是否存在相同的標識信息包括：

根據由所述待存儲文件生成的文件名信息查找所述云資源池和/或所述標識文件數據庫中是否存在相同的文件名信息。

進一步地，如上所述的方法，所述標識信息還包括MD5串；

若所述云資源池或所述標識文件數據庫中存在與所述待存儲文件相同的文件名信息，則所述方法還包括：

根據所述待存儲文件調用源數據庫的應用程序接口，以得到對應的返回塊數據；

根據返回塊數據的數據大小將所述待存儲文件切割成多個所述數據大小的存儲文件數據塊；

通過MD5的計算方式計算各個存儲文件數據塊以得到所述待存儲文件對應的MD5串；

根據所述待存儲文件對應的MD5串查找所述云資源池和/或所述標識文件數據庫中是否存在相同的MD5串。

進一步地，如上所述的方法，所述若所述標識文件數據庫或所述云資源池中存在相同的標識信息，則刪除所述待存儲文件，包括：