[發明專利]數據分塊存儲至分布式服務器的系統及方法

在審

• 申請號: 201210533979.X
• 申請日: 2012-12-12
• 公開（公告）號: CN103873504A
• 公開（公告）日: 2014-06-18
• 發明（設計）人: 柴智權;李大鵬;林海洪;李忠一
• 申請（專利權）人: 鴻富錦精密工業（深圳）有限公司;鴻海精密工業股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術領域

本發明涉及一種云端技術，尤其涉及一種通過云端技術將數據分塊存儲至分布式服務器的系統及方法。

背景技術

在云端技術中，當有文件上傳及存儲時，會經常遇到服務器的存儲空間不足、存儲進程長期被占用，及文件重復傳輸等缺陷，從而導致服務器無法及時響應用戶的存儲請求及無法使用戶及時上傳文件。

發明內容

鑒于以上內容，有必要提供一種數據分塊存儲至分布式服務器的系統，其可有效地節省服務器的存儲空間，使得服務器的傳輸進程不會被一個用戶長期占用，且加快了用戶上傳文件的速度。

所述數據分塊存儲至分布式服務器的系統，運行于一臺分配服務器中，該分配服務器通過網絡連接多個客戶端和多臺存儲服務器。該系統包括：接收模塊，用于接收客戶端上傳的文件信息和文件的哈希列表，存儲到哈希數據庫中，該哈希列表中記錄了文件的多個數據塊的名稱、各數據塊的哈希值及數據塊的分割順序；計算模塊，用于計算所述多臺存儲服務器的傳輸進程占用率，及各存儲服務器中每個存儲區的存儲空間；確定模塊，用于根據上述計算得到的數值，確定傳輸進程占用率低于預設值的存儲服務器為空閑存儲服務器，及確定該存儲服務器中有剩余存儲空間的存儲區；去重模塊，用于當哈希數據庫中有哈希值與所述存儲服務器中已存儲的數據塊的哈希值相同時，確定該哈希數據庫中該哈希值對應的數據塊為重復數據塊，通知相應客戶端所述存儲服務器中已存儲該數據塊而無需再上傳該數據塊，并返回該重復數據塊的存儲指針給相應客戶端；及分配模塊，用于將空閑存儲服務器中有剩余存儲空間的存儲區分配給去重后的各數據塊。

還有必要提供一種數據分塊存儲至分布式服務器的方法，其可有效地節省服務器的存儲空間，使得服務器的傳輸進程不會被一個用戶長期占用，且加快了用戶上傳文件的速度。

所述數據分塊存儲至分布式服務器的方法，應用于一臺分配服務器中，該分配服務器通過網絡連接多個客戶端和多臺存儲服務器。該方法包括：接收步驟，接收客戶端上傳的文件信息和文件的哈希列表，存儲到哈希數據庫中，該哈希列表中記錄了文件的多個數據塊的名稱、各數據塊的哈希值及數據塊的分割順序；計算步驟，計算所述多臺存儲服務器的傳輸進程占用率，及各存儲服務器中每個存儲區的存儲空間；確定步驟，根據上述計算得到的數值，確定傳輸進程占用率低于預設值的存儲服務器為空閑存儲服務器，及確定該空閑存儲服務器中有剩余存儲空間的存儲區；去重步驟，當哈希數據庫中有哈希值與所述存儲服務器中已存儲的數據塊的哈希值相同時，確定哈希數據庫中該哈希值對應的數據塊為重復數據塊，通知相應客戶端無需再上傳該數據塊，并返回該重復數據塊的存儲指針給相應客戶端；及分配步驟，將空閑存儲服務器中有剩余存儲空間的存儲區分配給去重后的各數據塊。

相較于現有技術，所述數據分塊存儲至分布式服務器的系統及方法，通過在服務器集群中加入一個分配服務器，使得各數據塊可以被合理地分配到一個存儲區，有效地節省了服務器的存儲空間，使得服務器的傳輸進程不會被一個用戶長期占用，并加快了用戶上傳文件的速度。

附圖說明

圖1是本發明數據分塊存儲至分布式服務器的系統較佳實施例的運行環境示意圖。

圖2是圖1中分配服務器的主要組成示意圖。

圖3是本發明數據分塊存儲至分布式服務器的方法較佳實施例的作業流程圖。

圖4是本發明用戶于客戶端下載存儲服務器中文件的作業流程圖。

主要元件符號說明