[發明專利]一種數據文件處理的方法及系統

在審

• 申請號: 202110246807.3
• 申請日: 2021-03-05
• 公開（公告）號: CN112835851A
• 公開（公告）日: 2021-05-25
• 發明（設計）人: 王晟權;楊鎮銘;解曉雨;馬海;丁曉陽;史程;王湃;趙建軍
• 申請（專利權）人: 華錄光存儲研究院（大連）有限公司;中國華錄集團有限公司
• 主分類號: G06F16/11
• 分類號: G06F16/11;G06F16/172;G06F16/18;G06F3/06
• 代理公司: 大連至誠專利代理事務所(特殊普通合伙) 21242
• 代理人: 楊威;楊爽

1.一種數據文件處理的方法，用于客戶端，其特征在于，包括：

調用服務器端提供的數據歸檔服務，啟動歸檔任務；

基于所述數據歸檔服務中提供的執行策略，對所述歸檔任務進行設置，所述執行策略包括時間策略、存放路徑策略和歸檔數據選擇策略；

基于設置后的所述歸檔任務對待歸檔數據進行歸檔，形成歸檔數據；

將所述歸檔數據上傳至所述服務器端的緩存存儲器，使所述歸檔數據可經由所述服務器端遷移到與所述服務器端通信連接的光盤庫中；

其中，所述歸檔數據上傳至所述服務器端的緩存存儲器的過程中還形成有臨時記錄文件，所述臨時記錄文件用于記錄有所述歸檔數據上傳過程中形成的文件或文件塊的標記信息。

2.根據權利要求1所述的方法，其特征在于，將所述歸檔數據上傳至所述服務器端的緩存存儲器之后，還包括：

間隔預定時間后，基于所述歸檔任務對新的待歸檔數據進行歸檔，形成新的歸檔數據；

將所述新的歸檔數據上傳至所述服務器端的緩存存儲器中；

重復上述間隔預定時間后形成新的歸檔數據，到將所述新的歸檔數據上傳至所述服務器端的緩存存儲器中的步驟，直到上傳完畢基于所述歸檔任務形成的全部歸檔數據。

3.根據權利要求1或2所述的方法，其特征在于，將所述歸檔數據上傳至所述服務器端的緩存存儲器，包括：

當所述歸檔數據上傳過程中形成的文件需要分塊上傳時，每完成一個文件塊的上傳后，在所述臨時記錄文件中記錄所述文件塊的塊信息，所述塊信息包括uploadID信息和partNumber信息；

當所述歸檔數據上傳過程中形成的文件不需要分塊上傳時，在一個文件上傳完成后，在臨時記錄文件中記錄所述文件的文件名信息；

遍歷所述臨時記錄文件中的所述塊信息和所述文件名信息，濾除與所述臨時記錄文件中記錄的所述塊信息和所述文件名信息對應的所述歸檔數據上傳過程中形成的文件或文件塊；

繼續上傳剩下的所述文件或文件塊。

4.根據權利要求1或2所述的方法，其特征在于，所述歸檔數據中還包括執行本次所述歸檔任務時的所述客戶端的系統信息文件，所述系統信息文件用于所述客戶端的系統崩潰時，使所述客戶端根據所述系統信息文件恢復到執行本次所述歸檔任務前的工作狀態。

5.一種數據文件處理的方法，用于服務器端，其特征在于，包括：

響應客戶端的調用，為所述客戶端提供數據歸檔服務，使所述客戶端根據所述數據歸檔服務啟動歸檔任務，并使所述客戶端基于所述數據歸檔服務中提供的執行策略設置其歸檔任務，所述執行策略包括時間策略、存放路徑策略和歸檔數據選擇策略；

通過緩存存儲器接收所述客戶端上傳的歸檔數據；

將所述歸檔數據從所述緩存存儲器中遷移到與所述服務器端通信連接的光盤庫中；

其中，通過緩存存儲器接收所述客戶端上傳的歸檔數據的過程中還形成有臨時記錄文件，所述臨時記錄文件用于記錄有所述歸檔數據上傳過程中形成的文件或文件塊的標記信息。

6.根據權利要求5所述的方法，其特征在于，將所述歸檔數據從所述緩存存儲器中遷移到與所述服務器端通信連接的光盤庫中之前，還包括；

間隔預定時間后，通過所述緩存存儲器再次接收所述客戶端上傳的新的歸檔數據；

重復上述再次接收的步驟，直到接收完基于所述歸檔任務形成的全部歸檔數據。

7.根據權利要求5或6所述的方法，其特征在于，將所述緩存存儲器中的所述歸檔數據遷移到光盤庫中，包括：

根據所述存放路徑策略確定刻錄所述歸檔數據的所述光盤庫中的光盤匣；

通過所述服務器端與所述光盤庫之間的高速數據鏈路將所述歸檔數據傳輸并刻錄至所述光盤匣中的光盤上，其中，所述高速數據鏈路包括基于SAS接口的線纜或基于FDDI接口的光纜，所述光盤庫為基于RAID讀寫管理的藍光光盤庫。