[發(fā)明專利]一種數(shù)據(jù)分級存儲方法及裝置

有效

• 申請?zhí)枺?/td>: 201710473539.2
• 申請日: 2017-06-20
• 公開（公告）號: CN107291390B
• 公開（公告）日: 2020-05-15
• 發(fā)明（設(shè)計）人: 魏桂寶
• 申請（專利權(quán)）人: 蘇州浪潮智能科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F11/14
• 代理公司: 北京安信方達知識產(chǎn)權(quán)代理有限公司 11262
• 代理人: 李紅爽;李丹

本發(fā)明提供一種數(shù)據(jù)分級存儲方法及裝置，上述方法包括以下步驟：采用第一級存儲區(qū)和第二級存儲區(qū)分別用于存儲數(shù)據(jù)，提高了存儲性能并降低了存儲成本，解決了lustre單節(jié)點故障問題以及Nvme ssd成本過高的問題。

技術(shù)領(lǐng)域

本發(fā)明屬于計算機領(lǐng)域，尤其涉及一種數(shù)據(jù)分級存儲方法及裝置。

背景技術(shù)

Lustre是HP，Intel，Cluster File System公司聯(lián)合美國能源部開發(fā)的Linux集群并行文件系統(tǒng)。Lustre采用分布式的鎖管理機制來實現(xiàn)并發(fā)控制，元數(shù)據(jù)和文件數(shù)據(jù)的通訊鏈路分開管理，是為解決海量存儲問題而設(shè)計的全新文件系統(tǒng)，是下一代的集群文件系統(tǒng)，可支持10,000個節(jié)點，PB的存儲量，100GB/S的傳輸速度，完美的安全性和可管理性。

2011年時，Non-Volatile Memory Express非易失性存儲器標(biāo)準(zhǔn)即NVMe規(guī)范正式出爐，這是專門針對NVND閃存和下一代存儲設(shè)備所提出的規(guī)范。它基于閃存的特點而研發(fā)，其目的是盡可能縮小存儲系統(tǒng)和內(nèi)存帶寬之間的差距。

Lustre消除了傳統(tǒng)網(wǎng)絡(luò)文件系統(tǒng)在可擴展性、可用性和性能上的問題，NVMe和PCI-E非常適合SSD高性能的需求，NVM作為專門為閃存設(shè)計的協(xié)議，通過高帶寬的PCI-E通道，能夠充分發(fā)揮出SSD的性能。但該方案存在lustre單節(jié)點故障問題，以及Nvme SSD成本過高，不適合用于大容量存儲介質(zhì)。

因此，迫切需要提供一種高效的數(shù)據(jù)存儲方案，來解決lustre單節(jié)點故障問題。

發(fā)明內(nèi)容

本發(fā)明提供一種數(shù)據(jù)分級存儲方法及裝置，以解決上述問題。

本發(fā)明提供一種數(shù)據(jù)分級存儲方法，應(yīng)用于基于Lustre文件系統(tǒng)。上述方法包括以下步驟：

采用第一級存儲區(qū)和第二級存儲區(qū)分別用于存儲數(shù)據(jù)。

本發(fā)明還提供一種數(shù)據(jù)分級存儲裝置，包括：應(yīng)用于基于Lustre文件系統(tǒng)，包括：第一級存儲區(qū)和第二級存儲區(qū)，分別用于存儲數(shù)據(jù)。

通過以下方案：采用第一級存儲區(qū)和第二級存儲區(qū)分別用于存儲數(shù)據(jù)，提高了存儲性能并降低了存儲成本，解決了lustre單節(jié)點故障問題以及Nvme ssd成本過高的問題。

附圖說明

此處所說明的附圖用來提供對本發(fā)明的進一步理解，構(gòu)成本申請的一部分，本發(fā)明的示意性實施例及其說明用于解釋本發(fā)明，并不構(gòu)成對本發(fā)明的不當(dāng)限定。在附圖中：

圖1所示為本發(fā)明實施例1的數(shù)據(jù)分級存儲方法處理流程圖；

圖2所示為本發(fā)明實施例2的數(shù)據(jù)分級存儲裝置結(jié)構(gòu)圖；

圖3所示為本發(fā)明實施例3的數(shù)據(jù)分級存儲裝置結(jié)構(gòu)圖。

具體實施方式

下文中將參考附圖并結(jié)合實施例來詳細說明本發(fā)明。需要說明的是，在不沖突的情況下，本申請中的實施例及實施例中的特征可以相互組合。

圖1所示為本發(fā)明實施例1的數(shù)據(jù)分級存儲方法處理流程圖，包括以下步驟：

步驟102：采用第一級存儲區(qū)和第二級存儲區(qū)分別用于存儲數(shù)據(jù)。

進一步地，所述第一級存儲區(qū)包括單節(jié)點lustre文件系統(tǒng)和基于Nvme傳輸協(xié)議的硬盤，所述第二存儲區(qū)包括HA lustre文件系統(tǒng)和機械硬盤。

進一步地，所述第一存儲區(qū)與所述第二存儲區(qū)之間使用兩套網(wǎng)絡(luò)連接，所述兩套網(wǎng)絡(luò)分別用于傳輸管理數(shù)據(jù)和計算數(shù)據(jù)。

進一步地，用于傳輸管理數(shù)據(jù)的網(wǎng)絡(luò)是以太網(wǎng)，用于傳輸計算數(shù)據(jù)的網(wǎng)絡(luò)是IB網(wǎng)絡(luò)。