[發(fā)明專(zhuān)利]一種分布式的文件存儲(chǔ)方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201611207434.4
• 申請(qǐng)日: 2016-12-23
• 公開(kāi)（公告）號(hào): CN108241640B
• 公開(kāi)（公告）日: 2022-04-08
• 發(fā)明（設(shè)計(jì)）人: 李振釗;王焰輝;曾剛
• 申請(qǐng)（專(zhuān)利權(quán)）人: 中科星圖股份有限公司
• 主分類(lèi)號(hào): G06F16/13
• 分類(lèi)號(hào): G06F16/13;G06F16/182
• 代理公司: 北京安博達(dá)知識(shí)產(chǎn)權(quán)代理有限公司 11271
• 代理人: 徐國(guó)文

本發(fā)明公開(kāi)了一種分布式的文件存儲(chǔ)方法，該方法包括：使用多個(gè)文件存儲(chǔ)服務(wù)器實(shí)現(xiàn)分布式的文件存儲(chǔ)，并使用管理服務(wù)器對(duì)所述文件存儲(chǔ)服務(wù)器進(jìn)行管理；當(dāng)需要存儲(chǔ)文件時(shí)，由管理服務(wù)器根據(jù)文件長(zhǎng)度，確定是否對(duì)文件分塊，如果需要分塊則確定文件的分塊方式，將文件或者分塊發(fā)送到相應(yīng)的文件存儲(chǔ)服務(wù)器進(jìn)行存儲(chǔ)；文件存儲(chǔ)服務(wù)器根據(jù)接收的文件或數(shù)據(jù)塊的哈希值確定該數(shù)據(jù)的存儲(chǔ)方式。

【技術(shù)領(lǐng)域】

本發(fā)明屬于計(jì)算機(jī)和文件存儲(chǔ)領(lǐng)域，具體的，涉及一種分布式的文件存儲(chǔ)方法。

【背景技術(shù)】

近年來(lái)，隨著計(jì)算機(jī)技術(shù)對(duì)各個(gè)方面的滲透，各行各業(yè)都被計(jì)算機(jī)化了，許多原有的系統(tǒng)都被改造成計(jì)算機(jī)系統(tǒng)，原有的紙質(zhì)文件也被改成計(jì)算機(jī)文件。計(jì)算機(jī)文件相對(duì)于紙質(zhì)文件具有許多優(yōu)點(diǎn)，例如容易復(fù)制，容易保存等等。但是，計(jì)算機(jī)文件如果都存儲(chǔ)在同一個(gè)地方，也會(huì)有巨大的危險(xiǎn)性，一旦該地方發(fā)生災(zāi)難，將造成大量文件丟失。因此，現(xiàn)有技術(shù)中出現(xiàn)了分布式文件存儲(chǔ)的概念，一方面設(shè)置多個(gè)文件文件服務(wù)器，分布在不同地點(diǎn)，用于存儲(chǔ)文件；另一方面，將同一文件存儲(chǔ)在不同服務(wù)器上，實(shí)現(xiàn)了冗余備份。

但是，現(xiàn)有技術(shù)中的分布式文件存儲(chǔ)沒(méi)有考慮重復(fù)文件對(duì)存儲(chǔ)空間的占用，造成了存儲(chǔ)資源的浪費(fèi)。

【發(fā)明內(nèi)容】

為了解決現(xiàn)有技術(shù)中的上述問(wèn)題，本發(fā)明提出了一種新的分布式的文件存儲(chǔ)方法，其技術(shù)方案如下：

一種分布式的文件存儲(chǔ)方法，該方法包括以下步驟：

步驟100：使用多個(gè)文件存儲(chǔ)服務(wù)器實(shí)現(xiàn)分布式的文件存儲(chǔ)，并使用管理服務(wù)器對(duì)所述文件存儲(chǔ)服務(wù)器進(jìn)行管理；

步驟200：當(dāng)需要存儲(chǔ)文件時(shí)，由管理服務(wù)器根據(jù)文件長(zhǎng)度，確定是否對(duì)文件分塊，如果需要分塊則確定文件的分塊方式，將文件或者分塊發(fā)送到相應(yīng)的文件存儲(chǔ)服務(wù)器進(jìn)行存儲(chǔ)；

步驟300：文件存儲(chǔ)服務(wù)器根據(jù)接收的文件或數(shù)據(jù)塊的哈希值確定該數(shù)據(jù)的存儲(chǔ)方式。

進(jìn)一步地，所述管理服務(wù)器和文件服務(wù)器之間通過(guò)網(wǎng)絡(luò)連接。

進(jìn)一步地，所述網(wǎng)絡(luò)是局域網(wǎng)。

進(jìn)一步地，所述網(wǎng)絡(luò)是互聯(lián)網(wǎng)。

進(jìn)一步地，所述網(wǎng)絡(luò)是廣域網(wǎng)。

本發(fā)明的技術(shù)效果是：提高了分布式文件存儲(chǔ)的資源利用率。

【附圖說(shuō)明】

此處所說(shuō)明的附圖是用來(lái)提供對(duì)本發(fā)明的進(jìn)一步理解，構(gòu)成本申請(qǐng)的一部分，但并不構(gòu)成對(duì)本發(fā)明的不當(dāng)限定，在附圖中：

圖1是本發(fā)明方法的基本流程圖。

【具體實(shí)施方式】

下面將結(jié)合附圖以及具體實(shí)施例來(lái)詳細(xì)說(shuō)明本發(fā)明，其中的示意性實(shí)施例以及說(shuō)明僅用來(lái)解釋本發(fā)明，但并不作為對(duì)本發(fā)明的不當(dāng)限定。

本發(fā)明方法所應(yīng)用的系統(tǒng)結(jié)構(gòu)包括管理服務(wù)器和多個(gè)文件服務(wù)器，所述管理服務(wù)器負(fù)責(zé)管理文件的清洗比對(duì)入庫(kù)，而文件服務(wù)器用于存儲(chǔ)數(shù)據(jù)。為了存儲(chǔ)海量的數(shù)據(jù)，本發(fā)明的優(yōu)選方案是使用256個(gè)文件服務(wù)器，當(dāng)然這是對(duì)于大型數(shù)據(jù)存儲(chǔ)系統(tǒng)而言的，如果使用者是小型企業(yè)，為了減少成本，也可以考慮將其中的多個(gè)服務(wù)器合并成一個(gè)，從而減少文件服務(wù)器數(shù)量。管理服務(wù)器和文件服務(wù)器之間，以及各個(gè)文件服務(wù)器之間通過(guò)網(wǎng)絡(luò)連接，可以是局域網(wǎng)、互聯(lián)網(wǎng)或者廣域網(wǎng)。

在上述系統(tǒng)結(jié)構(gòu)的基礎(chǔ)上，本發(fā)明的方法的基本步驟如下：

步驟100：使用多個(gè)文件存儲(chǔ)服務(wù)器實(shí)現(xiàn)分布式的文件存儲(chǔ)，并使用管理服務(wù)器對(duì)所述文件存儲(chǔ)服務(wù)器進(jìn)行管理；

步驟200：當(dāng)需要存儲(chǔ)文件時(shí)，由管理服務(wù)器根據(jù)文件長(zhǎng)度，確定是否對(duì)文件分塊，如果需要分塊則確定文件的分塊方式，將文件或者分塊發(fā)送到相應(yīng)的文件存儲(chǔ)服務(wù)器進(jìn)行存儲(chǔ)；