[發明專利]一種應用于云盤系統中的文件去重方法、系統

在審

• 申請號: 202011495615.8
• 申請日: 2020-12-17
• 公開（公告）號: CN112631514A
• 公開（公告）日: 2021-04-09
• 發明（設計）人: 陳軍
• 申請（專利權）人: 龍存科技（北京）股份有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;H04L29/08
• 代理公司: 北京文苑專利代理有限公司 11516
• 代理人: 于利曉

1.一種應用于云盤系統中的文件去重方法，其特征在于，包括：

客戶端上傳第一文件前，對所述第一文件進行弱校驗，將弱校驗信息發送給服務器；

所述服務器接收所述弱校驗信息，根據所述弱校驗信息確定所述服務器中是否有所述第一文件，將結果返回給客戶端；

所述客戶端根據返回的結果調整強校驗與內容上傳的流程。

2.根據權利要求1所述應用于云盤系統中的文件去重方法，其特征在于，所述將結果返回給客戶端，包括：

如果所述服務器中沒有所述第一文件，服務器將未命中的信息發送給所述客戶端；如果所述服務器中有所述第一文件，服務器將命中的信息發送給所述客戶端；

所述客戶端根據返回的結果調整強校驗與內容上傳的流程，包括：

當所述客戶端接收到的信息為未命中時，所述客戶端向所述服務器上傳所述第一文件，同時計算所述第一文件的MD5值，將MD5值發送給所述服務器；

當所述客戶端接收到的信息為命中時，所述客戶端對所述第一文件進行強校驗，計算所述第一文件的全文MD5值，所述客戶端向所述服務器發送創建請求，所述創建請求中攜帶所述第一文件的全文MD5值。

3.根據權利要求2所述應用于云盤系統中的文件去重方法，其特征在于，所述客戶端向所述服務器上傳所述第一文件，包括：

所述客戶端向所述服務器發送未命中MD5的文件創建請求；

所述方法還包括：

所述服務器接收未命中MD5的文件創建請求，生成一個臨時文件，在文件上傳結束時，在MD5文件庫通過硬鏈接關聯該臨時文件，然后重命名并移動該臨時文件至目標位置。

4.根據權利要求1-3任一項所述應用于云盤系統中的文件去重方法，其特征在于，所述弱校驗包括對所述第一文件的一部分進行校驗；所述強校驗包括對所述第一文件的全文進行校驗。

5.根據權利要求1-3任一項所述應用于云盤系統中的文件去重方法，其特征在于，所述客戶端與服務器基于HTTP協議進行通信，協議使用HTTP頭部的擴展tag標記來標記文件的請求類型和參數，使用HTTP的Content段來進行文件數據內容的交換。

6.一種應用于云盤系統中的文件去重系統，其特征在于，包括客戶端和服務器：

所述客戶端用于：上傳第一文件前，對所述第一文件進行弱校驗，將弱校驗信息發送給服務器；

所述服務器用于：接收所述弱校驗信息，根據所述弱校驗信息確定所述服務器中是否有所述第一文件，將結果返回給客戶端；

所述客戶端還用于：根據返回的結果調整強校驗與內容上傳的流程。

7.根據權利要求6所述應用于云盤系統中的文件去重系統，其特征在于，所述服務器用于：

如果所述服務器中沒有所述第一文件，服務器將未命中的信息發送給所述客戶端；如果所述服務器中有所述第一文件，服務器將命中的信息發送給所述客戶端；

所述客戶端用于：

當所述客戶端接收到的信息為未命中時，所述客戶端向所述服務器上傳所述第一文件，同時計算所述第一文件的MD5值，將MD5值發送給所述服務器；當所述客戶端接收到的信息為命中時，所述客戶端對所述第一文件進行強校驗，計算所述第一文件的全文MD5值，所述客戶端向所述服務器發送創建請求，所述創建請求中攜帶所述第一文件的全文MD5值。

8.根據權利要求7所述應用于云盤系統中的文件去重系統，其特征在于，所述客戶端用于：

所述客戶端向所述服務器發送未命中MD5的文件創建請求；

所述服務器還用于：接收未命中MD5的文件創建請求，生成一個臨時文件，在文件上傳結束時，在MD5文件庫通過硬鏈接關聯該臨時文件，然后重命名并移動該臨時文件至目標位置。

9.根據權利要求6-8中任一項所述應用于云盤系統中的文件去重系統，其特征在于，所述弱校驗包括對所述第一文件的一部分進行校驗；所述強校驗包括對所述第一文件的全文進行校驗。

10.根據權利要求6-8中任一項所述應用于云盤系統中的文件去重系統，其特征在于，所述客戶端與服務器基于HTTP協議進行通信，協議使用HTTP頭部的擴展tag標記來標記文件的請求類型和參數，使用HTTP的Content段來進行文件數據內容的交換。