[發(fā)明專利]數(shù)據(jù)存儲方法、裝置及分布式存儲系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201711450554.1
• 申請日: 2017-12-27
• 公開（公告）號: CN109976662B
• 公開（公告）日: 2022-06-14
• 發(fā)明（設(shè)計）人: 陳繼芬
• 申請（專利權(quán)）人: 浙江宇視科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京超凡志成知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11371
• 代理人: 王文紅

1.一種數(shù)據(jù)存儲方法，其特征在于，應(yīng)用于分布式存儲系統(tǒng)，所述分布式存儲系統(tǒng)包括多個邏輯存儲卷；所述方法包括：

檢測每個所述邏輯存儲卷的已存儲數(shù)據(jù)量；

當(dāng)檢測到存在至少一個所述邏輯存儲卷的已存儲數(shù)據(jù)量高于預(yù)設(shè)上限，且存在至少一個所述邏輯存儲卷的已存儲數(shù)據(jù)量低于預(yù)設(shè)下限時，將所述分布式存儲系統(tǒng)設(shè)置為第一存儲模式；

在所述第一存儲模式下接收到待存儲文件時，為所述待存儲文件確定存儲地址；

當(dāng)為所述待存儲文件確定的存儲地址為所述多個邏輯存儲卷中已存儲數(shù)據(jù)量最高的邏輯存儲卷時，將該邏輯存儲卷作為第一邏輯存儲卷，并在其他所述邏輯存儲卷中選取已存儲數(shù)據(jù)量最小的邏輯存儲卷作為第二邏輯存儲卷；

將所述待存儲文件存入所述第二邏輯存儲卷，并在所述第一邏輯存儲卷上建立該待存儲文件對應(yīng)的鏈接文件，使所述鏈接文件指向存儲于所述第二邏輯存儲卷上的所述待存儲文件。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

當(dāng)檢測到所有所述邏輯存儲卷的已存儲數(shù)據(jù)量均低于預(yù)設(shè)上限，或所有所述邏輯存儲卷的已存儲數(shù)據(jù)量均高于預(yù)設(shè)下限時，將所述分布式存儲系統(tǒng)設(shè)置為第二存儲模式；

在所述第二存儲模式下接收到待存儲文件時，為所述待存儲文件確定存儲地址，將所述待存儲文件存入所述確定的存儲地址對應(yīng)的邏輯存儲卷。

3.根據(jù)權(quán)利要求1或2所述的方法，其特征在于，所述為所述待存儲文件確定存儲地址的步驟，包括：

計算所述待存儲文件的文件名哈希值，根據(jù)所述文件名哈希值確定該待存儲文件的存儲地址。

4.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述檢測每個所述邏輯存儲卷的已存儲數(shù)據(jù)量的步驟，包括：

每間隔預(yù)設(shè)檢測時長對每個所述邏輯存儲卷的已存儲數(shù)據(jù)量進行檢測。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

檢測被標(biāo)識為故障的邏輯存儲卷中已存儲數(shù)據(jù)的存儲時長，其中，邏輯存儲卷在被標(biāo)識為故障后不接收待存儲文件；

當(dāng)所述被標(biāo)識為故障的邏輯存儲卷中已存儲數(shù)據(jù)的存儲時長均大于預(yù)設(shè)的留存期時長時，清除該邏輯存儲卷上的數(shù)據(jù)，并將該邏輯存儲卷標(biāo)識為可用，使該邏輯存儲卷可以重新接收并存儲待存儲文件。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述分布式存儲系統(tǒng)包括多個物理存儲節(jié)點，每個所述物理存儲節(jié)點包括多個相對獨立的物理存儲空間，每個所述邏輯存儲卷由多個位于不同物理存儲節(jié)點上的物理存儲空間組成；所述待存儲文件通過糾刪碼存儲方式被分為多個數(shù)據(jù)分片分別存儲在相應(yīng)邏輯存儲卷的多個物理存儲空間中。

7.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述邏輯存儲卷的已存儲數(shù)據(jù)量為該邏輯存儲卷上已存文件占該邏輯存儲卷可存儲數(shù)據(jù)容量的百分比。

8.一種數(shù)據(jù)存儲裝置，其特征在于，應(yīng)用于分布式存儲系統(tǒng)，所述分布式存儲系統(tǒng)包括多個邏輯存儲卷；所述裝置包括：

檢測模塊，用于所述分布式存儲系統(tǒng)檢測每個所述邏輯存儲卷的已存儲數(shù)據(jù)量；

模式切換模塊，用于當(dāng)檢測到存在至少一個所述邏輯存儲卷的已存儲數(shù)據(jù)量高于預(yù)設(shè)上限，且存在至少一個所述邏輯存儲卷的已存儲數(shù)據(jù)量低于預(yù)設(shè)下限時，將所述分布式存儲系統(tǒng)設(shè)置為第一存儲模式；

存儲地址確定模塊，用于在所述第一存儲模式下接收到待存儲文件時，為所述待存儲文件確定存儲地址；

選取模塊，用于當(dāng)為所述待存儲文件確定的存儲地址為所述多個邏輯存儲卷中已存儲數(shù)據(jù)量最高的邏輯存儲卷時，將該邏輯存儲卷作為第一邏輯存儲卷，并在其他所述邏輯存儲卷中選取已存儲數(shù)據(jù)量最小的邏輯存儲卷作為第二邏輯存儲卷；

轉(zhuǎn)存模塊，用于將所述待存儲文件存入所述第二邏輯存儲卷，并在所述第一邏輯存儲卷上建立該待存儲文件對應(yīng)的鏈接文件，使所述鏈接文件指向存儲于所述第二邏輯存儲卷上的所述待存儲文件。

9.一種分布式存儲系統(tǒng)，其特征在于，所述分布式存儲系統(tǒng)包括多個物理存儲節(jié)點，每個所述物理存儲節(jié)點包括多個相對獨立的物理存儲空間；分別位于不同所述物理存儲節(jié)點上的多個物理存儲空間組成邏輯存儲卷；每個所述物理存儲節(jié)點包括存儲器和處理器；

所述存儲器用于存儲可執(zhí)行的計算機程序；

各所述處理器用于執(zhí)行相應(yīng)的所述計算機程序，以使所述分布式存儲系統(tǒng)實現(xiàn)權(quán)利要求1至權(quán)利要求7中任意一項所述的數(shù)據(jù)存儲方法。