[發明專利]一種優化集群存儲網絡資源配置的方法

有效

• 申請號: 201110260455.3
• 申請日: 2011-09-05
• 公開（公告）號: CN102291466A
• 公開（公告）日: 2011-12-21
• 發明（設計）人: 劉希猛;葛峰
• 申請（專利權）人: 浪潮電子信息產業股份有限公司
• 主分類號: H04L29/08
• 分類號: H04L29/08;H04L12/56
• 代理公司: 暫無信息
• 代理人: 暫無信息

?

技術領域

本發明涉及一種計算機應用技術,?具體地說是一種優化集群存儲網絡資源配置的方法。

本發明應用于集群網絡存儲系統的開發測試、應用部署中。集群網絡存儲系統中,針對某些高性能數據處理領域,需要經常存儲、訪問海量數據文件,同時運行并行程序對海量數據進行處理,如:高能物理實驗中的數據處理程序、流媒體文件的存儲與訪問等。集群網絡存儲系統的特點是底層存儲設備節點多、網絡數據訪問量大，目前部署集群網絡存儲系統時，需綜合考慮系統的需求容量、性能、規模等參數。同時，開發測試過程中，合理分配節點數量、合理利用網絡帶寬是降低集群網絡存儲系統成本的重要途徑。

背景技術

集群網絡存儲發展過程中，出現了很多的新概念，例如虛擬文件系統、虛擬存儲服務器、虛擬存儲池等，這些虛擬概念是在實際物理結構基礎上構建的。合理分配實際的計算、存儲服務器，有效利用各部分資源性能進行資源虛擬化尤其重要。

存儲網絡中，有效地分配各網絡終端服務器數量及存儲磁盤陣列的容量，可以避免網絡瓶頸造成了物理資源的浪費，實現系統虛擬化后資源的最大化利用。

發明內容

本發明的目的是提供一種優化集群存儲網絡資源配置的方法，或是一種使用虛擬內存盤進行存儲系統網絡帶寬瓶頸的評測方法，具體來說就是通過屏蔽后端磁盤陣列或磁盤讀寫速度的影響，直接進行網絡存儲數據的帶寬評測，給大系統的評測、搭建提供合理的依據。

本發明的目的是按以下方式實現的，通過屏蔽后端磁盤陣列或磁盤讀寫速度的影響，直接進行網絡存儲數據的帶寬評測，給大系統的評測、搭建提供合理的依據，使用本地內存盤建立虛擬存儲池的方法進行網絡存儲數據帶寬的評測，該方法通過直接修改本地linux?系統參數，設定本地虛擬存儲盤大小，進而在本地內存盤上建立并行文件系統的虛擬存儲池，通過系統所屬網絡的客戶端節點訪問虛擬存儲空間，并測試網絡數據的傳輸帶寬，給出系統網絡帶寬的擬合曲線，為系統搭建的架構、規模提供可靠的評測依據，避免物理資源、網絡資源的浪費：具體步驟如下：

該方法包括：構建虛擬內存盤存儲池、實施網絡性能優化測試，其中：

構建虛擬內存盤存儲池：是該評測方法的關鍵，是本發明的核心部分，網絡存儲的文件系統不再使用傳統的物理磁盤或后端磁盤陣列進行創建，而使用本地linux系統下的虛擬內存盤，通過修改/etc/grub.conf中的啟動選項設置本地虛擬內存盤的大小，系統啟動后，使用文件系統創建命令直接訪問本地的/dev/ram0進行本地虛擬內存盤上文件系統的創建，整個網絡中所有存儲空間虛擬成統一的資源對外提供服務，本地計算機內存可達上百GB的空間，為該方法提供了足夠的空間大小，使用該方法能有效避免后端存儲資源對網絡帶寬的影響，特別是在系統的預估過程中有著重要意義；

網絡性能優化測試：是在屏蔽后端陣列影響的基礎上，進行網絡端口帶寬的優化，進而確定網絡端口的計算、存儲資源有效分配；通過多計算客戶端向單一存儲端口讀寫數據測試單一存儲端口的數據傳輸帶寬；通過多存儲端口提供服務，測試單一計算客戶節點的數據讀寫網絡帶寬瓶頸；通過多計算節點對多存儲節點繪制網絡帶寬及端口帶寬吞吐率的擬合曲線，通過以上數據分析，進行計算資源與存儲資源的有效分配，減少存儲、計算、網絡資源的瓶頸浪費，實現系統功效最大化。

本發明的友誼效果是：隨著存儲架構的發展，集群網絡存儲的應用部署越來越廣泛。針對不同的用戶需求，更好的評測存儲網絡的數據傳輸能力、評估確定系統環境規模具有重要意義。使用虛擬內存盤測試集群存儲網絡帶寬，并進行網絡配置資源優化，該方法在目前集群文件系統的開發中已經得到應用，對評估系統性能、系統規模大小具有重要的作用。

附圖說明

圖1虛擬內存盤存儲池；

圖2資源優化分配。

具體實施方式

參照幅圖對本發明的方法做以下詳細的說明。

使用本地內存盤建立虛擬存儲池的方法進行網絡存儲數據帶寬的評測。該方法可以通過直接修改本地linux?系統參數，設定本地虛擬存儲盤大小，進而在本地內存盤上建立并行文件系統的虛擬存儲池。通過系統所屬網絡的客戶端節點訪問虛擬存儲空間，并測試網絡數據的傳輸帶寬，給出系統網絡帶寬的擬合曲線，為系統搭建的架構、規模提供可靠的評測依據，避免物理資源、網絡資源的浪費。該方法包括以下兩個部分：虛擬內存盤存儲池、網絡性能優化測試。