[發(fā)明專利]一種對存儲卷的管理系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202010145511.8
• 申請日: 2020-03-05
• 公開（公告）號: CN111488321A
• 公開（公告）日: 2020-08-04
• 發(fā)明（設(shè)計）人: 郭彥輝
• 申請（專利權(quán)）人: 北京聯(lián)創(chuàng)信安科技股份有限公司
• 主分類號: G06F16/182
• 分類號: G06F16/182;G06F9/455
• 代理公司: 北京安博達知識產(chǎn)權(quán)代理有限公司 11271
• 代理人: 徐國文

本發(fā)明公開了一種對存儲卷的管理系統(tǒng)，包括多個節(jié)點、數(shù)據(jù)庫和接口層；每個節(jié)點包括多個磁盤、至少1個文件系統(tǒng)和節(jié)點文件管控系統(tǒng)；其中文件系統(tǒng)由所述節(jié)點中的多個磁盤虛擬化得到，所述文件系統(tǒng)中包括存儲卷，所述存儲卷用于存儲用戶構(gòu)建的文件，所述節(jié)點文件管控系統(tǒng)用于監(jiān)控并采集所述節(jié)點上文件系統(tǒng)中文件的元數(shù)據(jù)；所述數(shù)據(jù)庫，用于將各文件系統(tǒng)中文件的元數(shù)據(jù)進行存儲；所述接口層，用于基于用戶要求的服務(wù)對數(shù)據(jù)庫的元數(shù)據(jù)進行管理。本發(fā)明解決了分布式文件系統(tǒng)獲取文件目錄結(jié)構(gòu)緩慢、文件管理復(fù)雜的問題。

技術(shù)領(lǐng)域

本發(fā)明涉及存儲管理領(lǐng)域，具體涉及一種對存儲卷的管理系統(tǒng)。

背景技術(shù)

信息技術(shù)的發(fā)展帶來數(shù)據(jù)的爆炸性增長，PB規(guī)模的非結(jié)構(gòu)化數(shù)據(jù)越來越常見，如何有效地管理這些數(shù)據(jù)，并進一步發(fā)掘數(shù)據(jù)價值，已成為IT管理者所必須重視的問題。同時大數(shù)據(jù)4V特性也對存儲系統(tǒng)的大容量、高性能、易擴展、易用性等提出了更高要求。傳統(tǒng)的SAN和NAS存儲架構(gòu)已經(jīng)難以滿足海量數(shù)據(jù)的密集型I/O并發(fā)訪問管理需求。

如圖1所示，在大數(shù)據(jù)、互聯(lián)網(wǎng)和云計算時代，分布式文件系統(tǒng)得到迅速發(fā)展，分布式文件系統(tǒng)(Distributed File System，DFS)或網(wǎng)絡(luò)文件系統(tǒng)(Network File System，NFS)是一種允許文件通過網(wǎng)絡(luò)在多臺主機上分享的文件系統(tǒng)，可讓多機器上的多用戶分享文件和存儲空間。在這樣的文件系統(tǒng)中，客戶端并非直接訪問底層的數(shù)據(jù)存儲區(qū)塊，而是通過網(wǎng)絡(luò)，以特定的通信協(xié)議和服務(wù)器溝通。借由通信協(xié)議的設(shè)計，可以讓客戶端和服務(wù)器端都能根據(jù)訪問控制清單或是授權(quán)，來限制對于文件系統(tǒng)的訪問。它是各種不同的存儲服務(wù)器之上的組合，這些服務(wù)器由以太網(wǎng)或無限帶寬技術(shù)Infiniband以及遠(yuǎn)程直接內(nèi)存訪問RDMA互相融匯，最終所形成的一個大的并行文件系統(tǒng)網(wǎng)絡(luò)。分布式系統(tǒng)在遠(yuǎn)程數(shù)據(jù)中心運行，無法完全控制基礎(chǔ)結(jié)構(gòu)，這使管理和監(jiān)視比單機部署更困難。應(yīng)用必須在公開運行信息狀態(tài)下，管理員才可以使用這些信息來管理和監(jiān)視系統(tǒng)，并且現(xiàn)有分布式文件系統(tǒng)存在獲取文件目錄結(jié)構(gòu)緩慢、文件管理復(fù)雜、不夠智能化等問題。

發(fā)明內(nèi)容

為了解決現(xiàn)有技術(shù)中所存在的上述不足，本發(fā)明提供一種對存儲卷的管理系統(tǒng)。

本發(fā)明提供的一種對存儲卷的管理系統(tǒng)，包括：

多個節(jié)點、數(shù)據(jù)庫和接口層；

每個節(jié)點包括多個磁盤、至少1個文件系統(tǒng)和節(jié)點文件管控系統(tǒng)；其中文件系統(tǒng)由所述節(jié)點中的多個磁盤虛擬化得到，所述文件系統(tǒng)中包括存儲卷，所述存儲卷用于存儲用戶構(gòu)建的文件，所述節(jié)點文件管控系統(tǒng)用于監(jiān)控并采集所述節(jié)點上文件系統(tǒng)中文件的元數(shù)據(jù)；

所述數(shù)據(jù)庫，用于將各文件系統(tǒng)中文件的元數(shù)據(jù)進行存儲；

所述接口層，用于基于用戶要求的服務(wù)對數(shù)據(jù)庫的元數(shù)據(jù)進行管理。

優(yōu)選的，所述節(jié)點文件管控系統(tǒng)包括：監(jiān)控模塊和采集模塊；

所述監(jiān)控模塊，用于通過對接所述節(jié)點上操作系統(tǒng)內(nèi)核中的監(jiān)控文件系統(tǒng)組件來監(jiān)控每個節(jié)點中的文件系統(tǒng)是否被操作，并將所述操作以事件的方式插入到events事件列表中，同時基于events事件列表生成所述文件系統(tǒng)的事件通知，并基于所述事件通知生成所述文件系統(tǒng)的事件告警任務(wù)，所述監(jiān)控模塊還用于將所述事件告警任務(wù)發(fā)送到采集模塊；

所述采集模塊，用于基于所述事件告警任務(wù)采集相應(yīng)文件系統(tǒng)的元數(shù)據(jù)并將采集結(jié)果存儲到數(shù)據(jù)庫中；

其中，文件系統(tǒng)被操作包括文件系統(tǒng)中文件的創(chuàng)建、刪除、讀、寫以及移動操作；所述事件包括文件的創(chuàng)建、刪除、讀、寫和/或移動。

優(yōu)選的，所述采集模塊包括：

消息中間件，任務(wù)執(zhí)行單元和任務(wù)執(zhí)行結(jié)果單元；

所述消息中間件，用于提供存放事件告警任務(wù)的任務(wù)調(diào)度隊列；