[發明專利]一種基于分布式文件存儲系統的文件上傳方法及系統

在審

• 申請號: 201710767793.3
• 申請日: 2017-08-31
• 公開（公告）號: CN107508897A
• 公開（公告）日: 2017-12-22
• 發明（設計）人: 黃奕能
• 申請（專利權）人: 深圳市豐巢科技有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 廣東良馬律師事務所44395
• 代理人: 馬戎

1.一種基于分布式文件存儲系統的文件上傳方法，其特征在于，包括步驟：

A、將目標文件上傳到分布式文件存儲系統；

B、對成功上傳到分布式文件存儲系統的目標文件進行檢測，判斷所上傳的目標文件是否完整；

C、若所上傳的目標文件不完整，則調用本地重試機制重新上傳。

2.根據權利要求1所述的基于分布式文件存儲系統的文件上傳方法，其特征在于，所述步驟C之后還包括：

D、若在指定次數內仍無法上傳完整的目標文件，則發出告警并將對應目標文件的上傳狀態寫入數據庫中。

3.根據權利要求1所述的基于分布式文件存儲系統的文件上傳方法，其特征在于，所述步驟B具體包括：

B1、將目標文件的文件信息推送到kafka隊列中；

B2、定時獲取所述kafka隊列中的文件信息；

B3、通過MD5校驗和判斷所上傳的目標文件是否完整。

4.根據權利要求1所述的基于分布式文件存儲系統的文件上傳方法，其特征在于，所述步驟A具體包括：

A1、通過客戶端將目標文件上傳到本地服務器；

A2、將本地服務器中的目標文件保存到本地硬盤；

A3、將本地硬盤中的目標文件上傳到分布式文件存儲系統。

5.根據權利要求1所述的基于分布式文件存儲系統的文件上傳方法，其特征在于，所述步驟A之后、B之前還包括：

若目標文件上傳不成功，則調用本地重試機制重新上傳。

6.一種基于分布式文件存儲系統的文件上傳系統，其特征在于，包括：

上傳模塊，用于將目標文件上傳到分布式文件存儲系統；

檢測模塊，用于對成功上傳到分布式文件存儲系統的目標文件進行檢測，判斷所上傳的目標文件是否完整；

重傳模塊，用于若所上傳的目標文件不完整，則調用本地重試機制重新上傳。

7.根據權利要求6所述的基于分布式文件存儲系統的文件上傳系統，其特征在于，還包括：

告警模塊，用于若在指定次數內仍無法上傳完整的目標文件，則發出告警并將對應目標文件的上傳狀態寫入數據庫中。

8.根據權利要求6所述的基于分布式文件存儲系統的文件上傳系統，其特征在于，所述檢測模塊具體包括：

推送單元，用于將目標文件的文件信息推送到kafka隊列中；

獲取單元，用于定時獲取所述kafka隊列中的文件信息；

檢測單元，用于通過MD5校驗和判斷所上傳的目標文件是否完整。

9.根據權利要求6所述的基于分布式文件存儲系統的文件上傳系統，其特征在于，所述上傳模塊具體包括：

本地上傳單元，用于通過客戶端將目標文件上傳到本地服務器；

保存單元，用于將本地服務器中的目標文件保存到本地硬盤；

文件上傳單元，用于將本地硬盤中的目標文件上傳到分布式文件存儲系統。

10.根據權利要求6所述的基于分布式文件存儲系統的文件上傳系統，其特征在于，所述重傳模塊還用于：

若目標文件上傳不成功，則調用本地重試機制重新上傳。