[發明專利]一種分布式存儲系統的分片上傳方法、裝置及介質在審
| 申請號： | 202210998411.9 | 申請日： | 2022-08-19 |
| 公開（公告）號： | CN115328858A | 公開（公告）日： | 2022-11-11 |
| 發明（設計）人： | 蘇志恒 | 申請（專利權）人： | 濟南浪潮數據技術有限公司 |
| 主分類號： | G06F16/13 | 分類號： | G06F16/13;G06F16/182;G06F16/17 |
| 代理公司： | 北京集佳知識產權代理有限公司 11227 | 代理人： | 李赫 |
| 地址： | 250101 山東省濟南市自由貿易試驗區*** | 國省代碼： | 山東;37 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 一種 分布式 存儲系統 分片 上傳 方法 裝置 介質 | ||
本申請公開了一種分布式存儲系統的分片上傳方法、裝置及介質，涉及分布式存儲領域，提高分片小文件的上傳效率，接收客戶端下發的分片上傳請求，創建分片小文件，在分片小文件中寫入分片上傳請求的分片數據，將分片小文件的分片編號和分片大小信息記錄至臨時索引文件中，當分片數據上傳完成后，創建空的大文件，大文件的大小為分片數據的實際大小，讀取臨時索引文件記錄的分片信息并更新至大文件的元數據中。上傳的分片數據存儲在對應的分片小文件中，其對應的分片小文件的分片編號及分片數據的分片大小信息記錄至大文件的元數據中，不需要對小文件進行組合，減少了拷貝次數，提高了分片上傳的效率。
技術領域
本申請涉及分布式存儲領域，特別是涉及一種分布式存儲系統的分片上傳方法、裝置及介質。
背景技術
在分布式存儲系統中，為了適配對象協議分片上傳功能，實現對象協議無損兼容，已實現了一種分片小文件合并方案，解決分片大小不固定無法追加寫大文件的問題，即在所有分片數據上傳完成后，按分片編號從小到大逐個讀取分片小文件，再追加到大文件上，直至大文件數據完整后，再刪除各個分片小文件，實現對象分片上傳功能支持。
由于在組合分片小文件為一個大文件時，需要重新拷貝文件，會導致分片上傳效率降低，在分片小文件組合為大文件時，也不能進行正常讀/寫，性能較差。
由此可見，如何解決分片小文件上傳效率低的問題，是本領域人員亟待解決的技術問題。
發明內容
本申請的目的是提供一種提高分片小文件上傳效率的分布式存儲系統的分片上傳方法、裝置及介質。
為解決上述技術問題，本申請提供一種分布式存儲系統的分片上傳方法，包括：
接收客戶端下發的分片上傳請求；
創建分片小文件；
在分片小文件中寫入分片上傳請求的分片數據；
將分片小文件的分片編號和分片大小信息記錄至臨時索引文件中；
當分片數據上傳完成后，創建空的大文件，大文件的大小為分片數據的實際大小；
讀取臨時索引文件記錄的分片信息并更新至大文件的元數據中。
優選地，上述分布式存儲系統的分片上傳方法中，創建分片小文件，包括：
解析分片上傳請求的上傳路徑信息和上傳編號信息；
根據上傳路徑信息在對應的路徑下創建以上傳編號信息為名字的隱藏目錄；
在隱藏目錄下創建分片小文件。
優選地，上述分布式存儲系統的分片上傳方法中，解析分片上傳請求的上傳路徑信息和上傳編號信息之后，根據上傳路徑信息在對應的路徑下創建以上傳編號信息為名字的隱藏目錄之前，還包括：
判斷上傳路徑信息在對應的路徑下是否存在分片小文件；
若否，進入根據上傳路徑信息在對應的路徑下創建以上傳編號信息為名字的隱藏目錄的步驟。
優選地，上述分布式存儲系統的分片上傳方法中，若上傳路徑信息在對應的路徑下存在分片小文件，則還包括：
向客戶端返回文件存在的錯誤碼。
優選地，上述分布式存儲系統的分片上傳方法中，讀取臨時索引文件記錄的分片信息并更新至大文件的元數據中之后，還包括：
對元數據進行持久化處理。
優選地，上述分布式存儲系統的分片上傳方法中，讀取臨時索引文件記錄的分片信息并更新至大文件的元數據中之后，還包括：
接收大文件的讀/寫請求；
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于濟南浪潮數據技術有限公司，未經濟南浪潮數據技術有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202210998411.9/2.html，轉載請聲明來源鉆瓜專利網。
