[發明專利]一種ext4文件系統性能測試的方法、系統、設備及介質

在審

• 申請號: 202010110173.4
• 申請日: 2020-02-23
• 公開（公告）號: CN111309580A
• 公開（公告）日: 2020-06-19
• 發明（設計）人: 馮曉慶
• 申請（專利權）人: 蘇州浪潮智能科技有限公司
• 主分類號: G06F11/34
• 分類號: G06F11/34;G06F11/36;G06F16/182
• 代理公司: 北京連和連知識產權代理有限公司 11278
• 代理人: 張濤

本發明公開了一種ext4文件系統性能測試的方法、系統、設備和存儲介質，方法包括以下步驟：將集群中所有節點的IP信息寫入主機文件；使主節點從主機文件中獲取IP信息，并基于IP信息獲取每個從節點的磁盤組信息；基于磁盤組信息對磁盤逐個進行格式化并掛載ext4文件系統；以及基于磁盤路徑信息向多個從節點發送性能測試命令，以使得多個從節點同時對ext4文件系統進行性能測試。本發明提出的ext4文件系統性能測試的方法、系統、設備及介質通過主從式的測試框架，能夠以多計算機節點、多進程和多線程的方式并行地進行性能測試，從而能夠適應不同分布式文件系統的運行環境。

技術領域

本發明涉及性能測試領域，更具體地，特別是指一種ext4文件系統性能測試的方法、系統、計算機設備及可讀介質。

背景技術

近些年來，隨著數據的爆炸式增長，陸續出現了面向大數據計算的新型分布式系統，而這些系統所處理的數據都存儲在底層的分布式文件系統中。分布式文件系統用于在分布式環境下對上層應用提供文件存儲服務。與單機文件系統相比，分布式文件系統擁有良好的可擴展性，其通常構建在多個計算機節點之上，因此其存儲容量也通常可以隨著存儲節點數目的增長而擴充；另外，多個存儲節點通常提供并發訪問機制，這使得其讀寫的吞吐量也可以擴展以滿足上層應用的需求。

對于文件系統來說，我們硬件介質在掛載時可以選擇掛載的類型，目前在大數據量的分布式文件系統中，選擇ext4掛載的較多。現有技術中，當我們選擇ext4文件系統屬性時，無法快速并有針對性的對文件系統進行測試，及時地發現問題，反映出系統的瓶頸和不足。

發明內容

有鑒于此，本發明實施例的目的在于提出一種ext4文件系統性能測試的方法、系統、計算機設備及計算機可讀存儲介質，通過主從式的測試框架，能夠以多計算機節點、多進程和多線程的方式并行地進行性能測試，支持運行在不同的分布式集群環境上，從而能夠適應不同分布式文件系統的運行環境，同時避免了使用計算平臺而導致的額外開銷。

基于上述目的，本發明實施例的一方面提供了一種ext4文件系統性能測試的方法，包括如下步驟：將集群中所有節點的IP信息寫入主機文件；使主節點從所述主機文件中獲取所述IP信息，并基于所述IP信息獲取每個從節點的磁盤組信息；基于所述磁盤組信息對磁盤逐個進行格式化并掛載ext4文件系統；以及基于磁盤路徑信息向多個所述從節點發送性能測試命令，以使得多個所述從節點同時對ext4文件系統進行性能測試。

在一些實施方式中，所述基于磁盤路徑信息向多個所述從節點發送性能測試命令包括：設置在從節點上讀寫磁盤的數量。

在一些實施方式中，還包括：依次增大或減小所述從節點上讀寫磁盤的數量以獲得多組測試數據。

在一些實施方式中，所述使得多個所述從節點同時對ext4文件系統進行性能測試包括：控制多個所述從節點并發地執行所述性能測試，獲取測試結果中的寫入速度，并將所述寫入速度進行排序，得到最大值和最小值。

本發明實施例的另一方面，還提供了一種ext4文件系統性能測試的系統，包括：寫入模塊，配置用于將集群中所有節點的IP信息寫入主機文件；主節點模塊，配置用于使主節點從所述主機文件中獲取所述IP信息，并基于所述IP信息獲取每個從節點的磁盤組信息；掛載模塊，配置用于基于所述磁盤組信息對磁盤逐個進行格式化并掛載ext4文件系統；以及測試模塊，配置用于基于磁盤路徑信息向多個所述從節點發送性能測試命令，以使得多個所述從節點同時對ext4文件系統進行性能測試。

在一些實施方式中，所述測試模塊還配置用于：設置在從節點上讀寫磁盤的數量。

在一些實施方式中，還包括：調整模塊，配置用于依次增大或減小所述從節點上讀寫磁盤的數量以獲得多組測試數據。

在一些實施方式中，所述測試模塊還配置用于：控制多個所述從節點并發地執行所述性能測試，獲取測試結果中的寫入速度，并將所述寫入速度進行排序，得到最大值和最小值。