[發明專利]一種云存儲系統的文件存儲管理系統

無效

• 申請號: 201210036538.9
• 申請日: 2012-02-18
• 公開（公告）號: CN102546823A
• 公開（公告）日: 2012-07-04
• 發明（設計）人: 張真
• 申請（專利權）人: 南京云創存儲科技有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 暫無信息
• 代理人: 暫無信息

技術領域

本發明涉及電子信息技術領域，尤其涉及一種云存儲系統的文件存儲管理系統。

背景技術

傳統的集群存儲數據，其物理位置比較集中，數據存放無需考慮負載是否均衡。在實現本發明的過程中，發明人發現，云存儲系統一般采用順序存儲數據的原則存儲數據。但云存儲系統一般由多臺存儲服務器組成，一臺服務器滿載后可能無法滿足原承載用戶的需求。如果單純的采用順序存儲原則，則可能造成部分存儲服務器負載過重，部分服務器負載過輕。如此則導致存負載過重的存儲服務器性能下降，用戶無法高效的讀寫數據。

為給用戶提供持續高效的服務質量，有必要針對服務器的負載對存儲進行數據存儲優化，在海量數據存儲方面做出相應的改進。

發明內容

發明目的：本發明的目的在于克服現有技術的不足，提供一種云存儲系統的文件存儲管理系統。通過主卷管理服務器控制數據分流的方式，使存儲服務器均衡負載，性能一致且服務器原存儲數據存放路徑固定不變，通過本發明系統架構，可以支撐海量數據存儲。

本發明提供了一種云存儲系統的文件存儲管理系統，為解決上述的技術問題，提供了如下解決方案。

一種云存儲系統的文件存儲管理系統，包括：對于存儲節點服務器的負載百分比差值設置閥值，如果存儲節點服務器群組中的最高負載服務器與存儲節點服務器群組中的最低負載服務器負載百分比差值達到閥值，則通過主卷管理服務器控制數據對最高負載服務器存儲數據進行分流。

對于存儲節點服務器群組的負載百分比差值設置閥值，如果存儲節點服務器集群中的最高負載服務器群組與存儲節點服務器集群中的最低負載服務器群組負載百分比差值達到閥值，則通過主卷管理服務器控制數據對最高負載服務器群組新存儲數據進行分流。

本發明中特有的主卷管理服務器管理著其它普通存儲節點服務器，從而實現了本發明（云存儲系統）的存儲空間無限擴展的可能性，理論支撐容量可達到GP級，即1024*1024*1024PB。

數據分流具體方法如下：云存儲系統使用初期，主卷管理服務器根據存儲服務器負載百分比逐臺啟用存儲服務器，下文設以負載百分比差值設置的閥值為10%，X個云存儲系統集群，集群包括Y個服務器群組，每個群組各包含Z臺存儲服務器為例闡述云存儲系統初期的使用情況。

主卷管理服務器隨機安排第一個用戶的存儲空間在存儲系統集群M，存儲系統群組A中的存儲服務器1中，若該用戶的空間使用率未達到該存儲服務器總容量的10%，則后續用戶存儲空間依然安排在該存儲服務器中，直到第N個用戶使用該存儲服務器時，該存儲服務器負載達到10%，此時存儲服務器負載百分比差值達到閥值10%，主卷管理服務器開始對該存儲服務器新寫入數據進行分流，新寫入數據分流規則如下。

為保持用戶原有數據物理存儲位置不變，原有目錄下的新增數據依然存儲在存儲服務器1中，原有用戶新建的任意級別的目錄均映射到存儲服務器2中，新增用戶存儲空間均安排到存儲服務器2中。

存儲服務器2的使用與存儲服務器1相同，當儲存服務器2負載百分比差值達到閥值10%，管理服務器開始對儲存服務器2新寫入的數據進行分流，分流規則同服務器1。

以此類推，直到儲存服務器Z負載百分比差值達到閥值10%，主卷管理服務器開啟存儲系統群組B并開始對存儲系統群組A新寫入數據進行分流。

存儲系統群組B使用過程同存儲系統群組A，以此類推，直到Y個服務器群組負載百分比差值達到閥值10%,超級管理服務器開啟存儲系統集群L，存儲系統集群使用過程同存儲系統集群M。

優選的，所述服務器啟動方法能在系統使用初期有效節約系統使用成本。

優選的，只對新建目錄進行分流有如下特點：保證服務器原有存儲數據的物理位置不發生改變；用戶不需要向主卷管理服務器重新獲取原有數據存儲路徑，主卷管理服務器會自動記錄給用戶分配的存儲服務器信息；元數據內存訪問，帶寬飽和利用實現了快速訪問和高吞吐量的優越性能；有效減少了存儲服務器之間的數據流。

云存儲系統正常使用階段，由于每個存儲服務器（群組、集群）承載用戶活躍程度并不相同，如此便會導致每個存儲服務器（群組、集群）負載不均，管理服務器會對達到閥值的存儲服務器進行分流，分流規則同云存儲系統使用初期。

優選的，系統均衡負載能給用戶良好的使用體驗。