[發(fā)明專利]一種實(shí)現(xiàn)對(duì)象文件上傳的方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010867765.0
• 申請(qǐng)日: 2020-08-26
• 公開（公告）號(hào): CN112003944B
• 公開（公告）日: 2023-02-28
• 發(fā)明（設(shè)計(jì)）人: 錢兵;方浩
• 申請(qǐng)（專利權(quán)）人: 北京浪潮數(shù)據(jù)技術(shù)有限公司
• 主分類號(hào): H04L67/06
• 分類號(hào): H04L67/06;H04L67/141;H04L67/01;G06F16/13
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 劉曉菲

本發(fā)明公開了一種實(shí)現(xiàn)對(duì)象文件上傳的方法，包括：在服務(wù)端的文件系統(tǒng)上搭建對(duì)象存儲(chǔ)，并建立客戶端與服務(wù)端之間的專用鏈路；當(dāng)客戶端上傳對(duì)象文件時(shí)，通過專用鏈路接收對(duì)象文件并存儲(chǔ)在服務(wù)端的文件系統(tǒng)的目錄中；獲取對(duì)象文件的屬性信息；調(diào)用對(duì)象存儲(chǔ)的上傳接口，創(chuàng)建一個(gè)與對(duì)象文件的屬性信息相同的空對(duì)象并上傳到對(duì)象存儲(chǔ)中；根據(jù)上傳接口返回的路徑，將存儲(chǔ)在文件系統(tǒng)的目錄中的對(duì)象文件移動(dòng)到路徑中以實(shí)現(xiàn)對(duì)象文件的上傳。應(yīng)用本申請(qǐng)的方案，實(shí)現(xiàn)了對(duì)象文件的上傳，降低了上傳的對(duì)象文件對(duì)于對(duì)象存儲(chǔ)池的帶寬占用，解決了上傳大文件時(shí)的受限制的情況。本申請(qǐng)還公開了一種實(shí)現(xiàn)對(duì)象文件上傳的系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)，具有相應(yīng)技術(shù)效果。

技術(shù)領(lǐng)域

本發(fā)明涉及存儲(chǔ)技術(shù)領(lǐng)域，特別是涉及一種實(shí)現(xiàn)對(duì)象文件上傳的方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

目前的存儲(chǔ)大體上可分為三類：塊存儲(chǔ)、文件存儲(chǔ)以及對(duì)象存儲(chǔ)。塊存儲(chǔ)的讀寫速度快，但是不太適合共享。文件存儲(chǔ)則是利于共享，但是讀寫速度慢。對(duì)象存儲(chǔ)是為了克服塊存儲(chǔ)和文件存儲(chǔ)二者的缺點(diǎn)，并發(fā)揮二者各自的優(yōu)點(diǎn)而出現(xiàn)的，對(duì)象存儲(chǔ)不僅讀寫速度快，而且適用于分布式系統(tǒng)，利于共享。常見的開源對(duì)象存儲(chǔ)有Ceph、Swift等。

對(duì)于對(duì)象存儲(chǔ)而言，在上傳對(duì)象文件時(shí)，目前普遍使用的方式是調(diào)用對(duì)象存儲(chǔ)服務(wù)中提供的API(Application Programming Interface，應(yīng)用程序接口)，基于HTTP請(qǐng)求將數(shù)據(jù)分段或者切片上傳到對(duì)象存儲(chǔ)后端。這種方式強(qiáng)依賴對(duì)象存儲(chǔ)的客戶端與服務(wù)端的交互，在對(duì)象文件的上傳過程中，會(huì)占用對(duì)象存儲(chǔ)池大量的網(wǎng)絡(luò)帶寬。同時(shí)，一些對(duì)象存儲(chǔ)支持的最大上傳文件為5G，例如swift，超過5G后使用原生接口無法上傳。

綜上所述，如何有效地實(shí)現(xiàn)對(duì)象文件的上傳，降低上傳的對(duì)象文件對(duì)于對(duì)象存儲(chǔ)池的帶寬占用，解決上傳大文件時(shí)的受限制情況，是目前本領(lǐng)域技術(shù)人員急需解決的技術(shù)問題。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種實(shí)現(xiàn)對(duì)象文件上傳的方法、系統(tǒng)、設(shè)備及存儲(chǔ)介質(zhì)，以有效地實(shí)現(xiàn)對(duì)象文件的上傳，降低上傳的對(duì)象文件對(duì)于對(duì)象存儲(chǔ)池的帶寬占用，解決上傳大文件時(shí)的受限制情況。

為解決上述技術(shù)問題，本發(fā)明提供如下技術(shù)方案：

一種實(shí)現(xiàn)對(duì)象文件上傳的方法，包括：

在服務(wù)端的文件系統(tǒng)上搭建對(duì)象存儲(chǔ)，并建立客戶端與服務(wù)端之間的專用鏈路；

當(dāng)所述客戶端上傳對(duì)象文件時(shí)，通過所述專用鏈路接收所述對(duì)象文件并存儲(chǔ)在所述服務(wù)端的所述文件系統(tǒng)的目錄中；

獲取所述對(duì)象文件的屬性信息；

調(diào)用所述對(duì)象存儲(chǔ)的上傳接口，創(chuàng)建一個(gè)與所述對(duì)象文件的屬性信息相同的空對(duì)象并上傳到所述對(duì)象存儲(chǔ)中；

根據(jù)上傳接口返回的路徑，將存儲(chǔ)在所述文件系統(tǒng)的目錄中的所述對(duì)象文件移動(dòng)到所述路徑中以實(shí)現(xiàn)對(duì)象文件的上傳。

優(yōu)選的，所述客戶端基于FTP進(jìn)行所述對(duì)象文件的上傳。

優(yōu)選的，所述客戶端與所述服務(wù)端之間的專用鏈路為通過網(wǎng)卡建立的專用鏈路。

優(yōu)選的，所述存儲(chǔ)在所述服務(wù)端的所述文件系統(tǒng)的目錄中，包括：

存儲(chǔ)在所述服務(wù)端的所述文件系統(tǒng)的根目錄中，或者存儲(chǔ)在所述服務(wù)端的所述文件系統(tǒng)的臨時(shí)目錄中。

優(yōu)選的，還包括：

讀取配置文件，并在通過所述專用鏈路接收所述對(duì)象文件時(shí)，基于所述配置文件中的信息進(jìn)行上傳限速控制。

優(yōu)選的，在將存儲(chǔ)在所述文件系統(tǒng)的目錄中的所述對(duì)象文件移動(dòng)到所述路徑中以實(shí)現(xiàn)對(duì)象文件的上傳之后，還包括：

輸出提示信息。