[發(fā)明專利]數(shù)據(jù)存儲方法、讀取方法、裝置、設備及存儲介質

有效

• 申請?zhí)枺?/td>: 201911354801.7
• 申請日: 2019-12-25
• 公開（公告）號: CN111399764B
• 公開（公告）日: 2023-04-14
• 發(fā)明（設計）人: 方毅;黃華東;夏偉強;王偉
• 申請（專利權）人: 杭州海康威視系統(tǒng)技術有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京三高永信知識產(chǎn)權代理有限責任公司 11138
• 代理人: 李珂珂

1.一種數(shù)據(jù)存儲方法，其特征在于，應用于分布式存儲系統(tǒng)的多個存儲節(jié)點中的調度存儲節(jié)點，所述調度存儲節(jié)點是由管理節(jié)點從所述多個存儲節(jié)點中為當前待存儲的對象數(shù)據(jù)選擇的，所述方法包括：

接收所述對象數(shù)據(jù)；對所述對象數(shù)據(jù)進行條帶化處理，得到多個條帶數(shù)據(jù)；

根據(jù)所述多個存儲節(jié)點當前的資源信息，確定所述多個條帶數(shù)據(jù)的存儲位置信息；根據(jù)所述多個條帶數(shù)據(jù)的存儲位置信息，生成所述多個條帶數(shù)據(jù)的條帶索引信息；

生成所述多個條帶數(shù)據(jù)的條帶數(shù)據(jù)標識；將所述多個條帶數(shù)據(jù)存儲至所述多個存儲節(jié)點中，以及將所述多個條帶數(shù)據(jù)的條帶數(shù)據(jù)標識與條帶索引信息對應存儲至所述多個存儲節(jié)點中；

所述將所述多個條帶數(shù)據(jù)存儲至所述多個存儲節(jié)點中，以及將所述多個條帶數(shù)據(jù)的條帶數(shù)據(jù)標識與條帶索引信息對應存儲至所述多個存儲節(jié)點中，包括：

在本地存儲目標條帶數(shù)據(jù)，以及將所述目標條帶數(shù)據(jù)的條帶數(shù)據(jù)標識與索引信息對應存儲至本地，所述目標條帶數(shù)據(jù)是指需要本端存儲的條帶數(shù)據(jù)；

根據(jù)參考策略，從所述多個存儲節(jié)點中確定目標存儲節(jié)點；

將所述目標條帶數(shù)據(jù)的條帶數(shù)據(jù)標識與索引信息對應存儲至所述目標存儲節(jié)點中，并建立所述目標存儲節(jié)點與所述調度存儲節(jié)點之間的關聯(lián)關系。

2.如權利要求1所述的方法，其特征在于，所述將所述多個條帶數(shù)據(jù)存儲至所述多個存儲節(jié)點中，以及將所述多個條帶數(shù)據(jù)的條帶數(shù)據(jù)標識與條帶索引信息對應存儲至所述多個存儲節(jié)點中，包括：

在本地存儲目標條帶數(shù)據(jù)，以及將所述目標條帶數(shù)據(jù)的條帶數(shù)據(jù)標識與索引信息對應存儲至本地，所述目標條帶數(shù)據(jù)是指需要本端存儲的條帶數(shù)據(jù)；

將所述多個條帶數(shù)據(jù)中除所述目標條帶數(shù)據(jù)之外的其他條帶數(shù)據(jù)、其他條帶數(shù)據(jù)的條帶數(shù)據(jù)標識和條帶索引信息發(fā)送至其他存儲節(jié)點進行存儲。

3.如權利要求2所述的方法，其特征在于，每個條帶數(shù)據(jù)包括多個數(shù)據(jù)單元，所述存儲位置信息包括每個數(shù)據(jù)單元的存儲位置信息，所述根據(jù)所述多個條帶數(shù)據(jù)的存儲位置信息，生成所述多個條帶數(shù)據(jù)的條帶索引信息之前，還包括：

獲取每個條帶數(shù)據(jù)中的每個數(shù)據(jù)單元的位置索引信息；

相應地，所述根據(jù)所述多個條帶數(shù)據(jù)的存儲位置信息，生成所述多個條帶數(shù)據(jù)的條帶索引信息，包括：

對于所述多個條帶數(shù)據(jù)中的任一條帶數(shù)據(jù)，根據(jù)所述任一條帶數(shù)據(jù)中的每個數(shù)據(jù)單元的存儲位置信息和所述每個數(shù)據(jù)單元在所述任一條帶數(shù)據(jù)中的位置索引信息，生成所述任一條帶數(shù)據(jù)的條帶索引信息。

4.一種數(shù)據(jù)讀取方法，其特征在于，應用于分布式存儲系統(tǒng)的多個存儲節(jié)點中的調度存儲節(jié)點，所述調度存儲節(jié)點是由管理節(jié)點從所述多個存儲節(jié)點中為當前待讀取的對象數(shù)據(jù)確定的，所述方法包括：

接收來自客戶端的信息獲取請求，所述信息獲取請求攜帶所述對象數(shù)據(jù)的對象數(shù)據(jù)標識，所述對象數(shù)據(jù)包括多個條帶數(shù)據(jù)；

基于所述對象數(shù)據(jù)標識，獲取所述多個條帶數(shù)據(jù)的條帶數(shù)據(jù)標識，每個條帶數(shù)據(jù)標識與條帶索引信息對應，所述多個條帶數(shù)據(jù)的條帶索引信息由所述調度存儲節(jié)點存儲在所述多個存儲節(jié)點中；

獲取多個條帶標識對應的節(jié)點地址信息，每個節(jié)點地址信息指示的存儲節(jié)點用于存儲對應的條帶標識指示的條帶數(shù)據(jù)；

將所述多個條帶數(shù)據(jù)標識和所述多個條帶標識對應的節(jié)點地址信息發(fā)送給所述客戶端；

接收來自所述客戶端的數(shù)據(jù)讀取請求，所述數(shù)據(jù)讀取請求攜帶待讀取條帶數(shù)據(jù)的條帶數(shù)據(jù)標識；

從本地存儲的條帶數(shù)據(jù)標識與條帶索引信息之間的對應關系中，查詢所述條帶數(shù)據(jù)標識對應的條帶索引信息；

當查詢到所述條帶數(shù)據(jù)標識對應的條帶索引信息時，根據(jù)所述條帶索引信息從對應的存儲節(jié)點中獲取所述待讀取條帶數(shù)據(jù)；

所述從本地存儲的條帶數(shù)據(jù)標識與條帶索引信息之間的對應關系中，查詢所述條帶數(shù)據(jù)標識對應的條帶索引信息之后，還包括：

當未查詢到所述條帶數(shù)據(jù)標識對應的條帶索引信息時，確定與所述調度存儲節(jié)點具有關聯(lián)關系的目標存儲節(jié)點的節(jié)點地址信息，所述目標存儲節(jié)點在數(shù)據(jù)存儲時同步存儲了所述調度存儲節(jié)點存儲的所述條帶數(shù)據(jù)標識與條帶索引信息之間的對應關系；

基于所確定的節(jié)點地址信息，從所述目標存儲節(jié)點中查詢所述條帶數(shù)據(jù)標識對應的條帶索引信息。