[發(fā)明專利]一種分布式存儲方法及分布式存儲裝置

有效

• 申請?zhí)枺?/td>: 201811117783.6
• 申請日: 2018-09-21
• 公開（公告）號: CN109407976B
• 公開（公告）日: 2021-09-14
• 發(fā)明（設(shè)計）人: 汪權(quán);劉軍
• 申請（專利權(quán)）人: 聯(lián)想（北京）有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京金信知識產(chǎn)權(quán)代理有限公司 11225
• 代理人: 黃威;佛新瑜

本申請實施例提供一種分布式存儲方法及分布式存儲裝置，所述方法包括：檢測到存儲裝置中第一存儲節(jié)點到達(dá)滿負(fù)載狀態(tài)時：獲取其余存儲節(jié)點的狀態(tài)信息，所述狀態(tài)信息至少包括剩余存儲空間信息；根據(jù)所述狀態(tài)信息確定第二存儲節(jié)點作為用于對所述第一存儲節(jié)點進行擴容的應(yīng)急節(jié)點。本申請的實施例中的分布式存儲方法能夠有效避免存儲裝置中因某一節(jié)點到達(dá)滿負(fù)載狀態(tài)時導(dǎo)致存儲裝置整體不能繼續(xù)進行新數(shù)據(jù)的讀寫，影響用戶使用的現(xiàn)象發(fā)生。

技術(shù)領(lǐng)域

本申請實施例涉及數(shù)據(jù)存儲領(lǐng)域，特別涉及一種分布式存儲方法及應(yīng)用該種方法的分布式存儲裝置。

背景技術(shù)

目前在分布式存儲裝置中一般采用一致性哈希算法來分布和定位多副本數(shù)據(jù)，但是一致性哈希并不能確保數(shù)據(jù)能夠完全的進行均勻分布，所以在分布式存儲裝置中經(jīng)常出現(xiàn)當(dāng)某一個節(jié)點的存儲空間使用率達(dá)到100％，即滿負(fù)載的時候，其他節(jié)點的存儲空間使用率可能只在70％，還有很多存儲空間可以利用。而目前基本上所有分布式存儲裝置都會因為某一個節(jié)點的存儲空間達(dá)到滿負(fù)載時，便認(rèn)定集群整體處于滿負(fù)載狀態(tài)，導(dǎo)致集群無法繼續(xù)讀寫新的數(shù)據(jù)，造成客戶業(yè)務(wù)的中斷。

對于上述技術(shù)問題，目前還沒有較好的解決辦法。目前現(xiàn)有技術(shù)中可以做到的是提前警告，給每個存儲節(jié)點添加定時監(jiān)控設(shè)備，以監(jiān)測節(jié)點的存儲空間使用率，當(dāng)定時監(jiān)控設(shè)備檢測到某節(jié)點的存儲空間使用率到達(dá)某一個閾值的時候，例如鄰近滿負(fù)載的時候，發(fā)郵件給裝置管理員，提醒裝置管理員及時進行集群擴容。但是提前警告，只能預(yù)防存儲空間到達(dá)滿負(fù)載致使客戶業(yè)務(wù)中斷的情況，但并沒有解決這個問題。如果在警告后沒有新的設(shè)備及時擴容集群，一旦某個節(jié)點的存儲空間到達(dá)滿負(fù)載，集群仍舊無法繼續(xù)讀寫新的數(shù)據(jù)，客戶業(yè)務(wù)還是會中斷。

目前還有一種做法是用于為了確保客戶業(yè)務(wù)不會突然中斷，故從存儲裝置中剔除滿負(fù)載節(jié)點，但是在分布式存儲裝置中當(dāng)某一個節(jié)點達(dá)到滿負(fù)載的時候，一定存在某些節(jié)點也基本飽和，在數(shù)據(jù)恢復(fù)過程中這些節(jié)點很快會出現(xiàn)下一個滿負(fù)載的節(jié)點，所以目前這種方法缺點多，風(fēng)險大，不適合廣泛使用。

發(fā)明內(nèi)容

本申請的實施例提供了一種能夠在存儲裝置中因某一存儲節(jié)點到達(dá)滿負(fù)載狀態(tài)時，存儲裝置整體仍能繼續(xù)進行新數(shù)據(jù)的讀寫的分布式存儲方法及應(yīng)用該種方法的分布式存儲裝置。

為了解決上述技術(shù)問題，本申請實施例提供了如下的技術(shù)方案：

一種分布式存儲方法，包括：

檢測到存儲裝置中第一存儲節(jié)點到達(dá)滿負(fù)載狀態(tài)時：

獲取其余存儲節(jié)點的狀態(tài)信息，所述狀態(tài)信息至少包括剩余存儲空間信息；

根據(jù)所述狀態(tài)信息確定第二存儲節(jié)點作為用于對所述第一存儲節(jié)點進行擴容的應(yīng)急節(jié)點。

作為優(yōu)選，所述狀態(tài)信息還包括對應(yīng)的所述存儲節(jié)點的存儲空間的歷史使用信息；

所述根據(jù)所述狀態(tài)信息確定第二存儲節(jié)點作為用于對所述第一存儲節(jié)點進行擴容的應(yīng)急節(jié)點具體為：

根據(jù)所述剩余存儲空間信息確定候選存儲節(jié)點；

根據(jù)所述歷史使用信息從所述候選存儲節(jié)點中確定所述應(yīng)急節(jié)點。

作為優(yōu)選，所述狀態(tài)信息還包括用于表明對應(yīng)的所述存儲節(jié)點是否為所述第三存儲節(jié)點的應(yīng)急節(jié)點的第一標(biāo)記信息；

所述根據(jù)所述狀態(tài)信息確定第二存儲節(jié)點作為用于對所述第一存儲節(jié)點進行擴容的應(yīng)急節(jié)點具體為：

根據(jù)所述剩余存儲空間信息確定候選存儲節(jié)點；

根據(jù)所述第一標(biāo)記信息從所述候選存儲節(jié)點中確定所述應(yīng)急節(jié)點。

作為優(yōu)選，還包括：

根據(jù)所述應(yīng)急節(jié)點的存儲空間信息確定用于存儲所述第一存儲節(jié)點新讀寫的數(shù)據(jù)的應(yīng)急存儲空間；