[發明專利]一種基于分布式存儲單元管理系統和方法

在審

• 申請號: 202011143193.8
• 申請日: 2020-10-23
• 公開（公告）號: CN112260874A
• 公開（公告）日: 2021-01-22
• 發明（設計）人: 王文靜;王中原;陳靚
• 申請（專利權）人: 南京鵬云網絡科技有限公司
• 主分類號: H04L12/24
• 分類號: H04L12/24;H04L29/08;G06F16/27
• 代理公司: 江蘇瑞途律師事務所 32346
• 代理人: 徐倩

本發明公開了一種基于分布式存儲單元管理系統，包括：若干信息管理服務中心，所述信息管理中心中包括一個主信息管理中心和多個從信息管理中心，所述主信息管理中心用于建立并管理段單元與從信息管理中心之間的映射關系，所述從信息管理中心用于管理段單元。本發明同時還公開了一種方法，通過設置多個信息管理中心來管理段單元，主信息管理中心為從信息管理中心分配若干段單元以便管理，同時主信息管理中心還將從信息管理中心與段單元的映射關系記錄下來，整個存儲系統呈現分布式管理的結構，具有更好的安全性和可靠性，同時，由于信息管理中心為多個，可以采用性能普通的服務器來充當信息管理中心，因此可以有效地降低成本。

技術領域

本發明屬于數據存儲領域，更具體地說，涉及一種基于分布式存儲單元管理系統和方法。

背景技術

分布式的塊存儲系統中，為了數據的安全，通過為段單元(segment unit)制作副本來實現數據的多備份和安全性。關于如何管理段單元，并在段單元出現丟失或損毀的時候能快速感知到，傳統的分布式塊存儲管理采用如圖2所示的單節點管理，即所有的數據節點(datanode)定時將自己的段單元的數據信息上報到信息管理服務器，信息管理服務器按照卷的組成，存儲和管理所有的段單元，段單元所在的數據節點定時向一個信息管理服務器上報數據信息，信息管理服務器收集和管理段單元的數據信息，就能實時知道每個段單元的狀態。

但是隨著段單元的增多，對應的信息管理服務器需要的內存等資源都會跟著增加，造成成本的增加。同時在目前存儲系統大集群發展的趨勢下，段單元的數量非常多，單個節點的信息管理服務器的處理能力存在上限，在段單元數量大到一定程度時，根本來不及處理；而且如果單節點出現故障，段單元的數據信息需要重新收集，這樣會耗費過多的時間，而且系統的穩定性也較差。

申請公布日為2019年1月4日，申請公布號為CN109151057A，專利名稱為一種智能分布式存儲集群管理的方法的中國專利公開了一種技術方案，通過設置緩存模塊；將集群管理所需數據存儲在緩存模塊中；接收其他集群數據調用請求；根據上述數據調用請求，將緩存模塊中存儲的數據進行數據返回。本發明公開的智能分布式存儲集群管理的方法，通過新增一個緩存模塊，當收到來自其他集群的請求時，將定時緩存數據返回，不再直接調用命令，減輕系統的資源消耗，提高系統的效率。

不同于上述技術方案，為了解決目前分布式存儲系統存在的可靠性差、處理速度不夠的問題，本發明提供一種基于分布式存儲單元管理方法。

發明內容

1.要解決的問題

針對現有技術中分布式存儲系統存在的可靠性差、處理速度不夠的問題，本發明提供一種基于分布式存儲單元管理系統和方法。

2.技術方案

為了解決上述問題，本發明所采用的技術方案如下：一種基于分布式存儲單元管理系統，包括：若干信息管理服務中心，所述信息管理中心中包括一個主信息管理中心和多個從信息管理中心，所述主信息管理中心用于建立并管理段單元與從信息管理中心之間的映射關系，所述從信息管理中心用于管理段單元。本技術方案通過設置多個信息管理中心來管理段單元，其中，同一時間只有一個主信息管理中心，其余的為從信息管理中心，主信息管理中心為從信息管理中心分配若干段單元以便管理，同時主信息管理中心還將從信息管理中心與段單元的映射關系記錄下來，整個存儲系統呈現分布式管理的結構，具有更好的安全性和可靠性，同時，由于信息管理中心為多個，可以采用性能普通的服務器來充當信息管理中心，因此可以有效地降低成本。

進一步地，當段單元沒有對應的信息管理中心時，則向主信息管理中心上報，主信息管理中心收到段單元上報的信息后，將該段單元分配給從信息管理中心進行管理，并為其建立映射關系表記錄兩者之間的映射關系。在系統一開始啟動主信息管理中心尚未建立映射關系表的時候，所有的段單元都向主信息管理中心上報，主信息管理中心將該段單元分配給從信息管理中心進行管理，并為其建立映射關系表記錄兩者之間的映射關系，建立映射關系后，段單元直接向從信息管理中心上報，以便管理。