[發(fā)明專利]一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理方法

在審

• 申請?zhí)枺?/td>: 201811108566.0
• 申請日: 2018-09-21
• 公開（公告）號: CN109086462A
• 公開（公告）日: 2018-12-25
• 發(fā)明（設(shè)計）人: 李旭東
• 申請（專利權(quán)）人: 鄭州云海信息技術(shù)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京集佳知識產(chǎn)權(quán)代理有限公司 11227
• 代理人: 羅滿

本發(fā)明公開了一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理方法，能夠響應(yīng)于將元數(shù)據(jù)集群寫回數(shù)據(jù)集群的指令，確定所述元數(shù)據(jù)集群中的臟目錄項，然后遍歷所述臟目錄項，判斷所述臟目錄項所在的目錄分片中的臟目錄項是否均變更為干凈目錄項，若是，則將所述目錄分片寫回所述數(shù)據(jù)集群。可見，該方法只需要輪詢目錄分片中的臟目錄項，避免了輪詢?nèi)康哪夸涰棧瑴p少了元數(shù)據(jù)集群的訪問量，降低了訪問延時，從而提升了元數(shù)據(jù)集群的訪問性能。此外，本發(fā)明還提供了一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理裝置、設(shè)備、及計算機可讀存儲介質(zhì)，其作用與上述方法相對應(yīng)。

技術(shù)領(lǐng)域

本發(fā)明涉及計算機領(lǐng)域，特別涉及一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理方法、裝置、設(shè)備及計算機可讀存儲介質(zhì)。

背景技術(shù)

分布式文件系統(tǒng)中的元數(shù)據(jù)集群作為文件系統(tǒng)的第二層緩存，分布式的管理整個文件系統(tǒng)的命名空間。

元數(shù)據(jù)集群只使用內(nèi)存不使用磁盤存儲元數(shù)據(jù)數(shù)據(jù)，如果把整個分布式文件系統(tǒng)環(huán)境看成一臺單機，那么元數(shù)據(jù)集群相當于內(nèi)存，數(shù)據(jù)集群相當于磁盤。

內(nèi)存總是比較稀缺的資源。在將元數(shù)據(jù)集群寫回數(shù)據(jù)集群時，由于只能以目錄分片為單位寫回，而臟目錄項需要在變更為干凈目錄項時才能寫回，因此，傳統(tǒng)的元數(shù)據(jù)管理方法需要輪詢目錄分片中各個目錄項，直到所有目錄項都為干凈目錄項。但是，這種方式對元數(shù)據(jù)的訪問量較大，使得訪問延時較高。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理方法、裝置、設(shè)備及計算機可讀存儲介質(zhì)，用以解決傳統(tǒng)的元數(shù)據(jù)管理方法在將元數(shù)據(jù)集群寫回數(shù)據(jù)集群時，對元數(shù)據(jù)的訪問量較大，訪問延時較高的問題。

為解決上述技術(shù)問題，本發(fā)明提供了一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理方法，包括：

響應(yīng)于將元數(shù)據(jù)集群寫回數(shù)據(jù)集群的指令，確定所述元數(shù)據(jù)集群中的臟目錄項；

遍歷所述臟目錄項，判斷所述臟目錄項所在的目錄分片中的臟目錄項是否均變更為干凈目錄項；

若是，則將所述目錄分片寫回所述數(shù)據(jù)集群。

其中，所述元數(shù)據(jù)集群為屬主元數(shù)據(jù)集群；

在所述預(yù)先確定元數(shù)據(jù)集群中的臟目錄項之前，包括：

在屬主元數(shù)據(jù)集群的訪問頻率大于預(yù)設(shè)閾值時，創(chuàng)建所述元數(shù)據(jù)集群的副本元數(shù)據(jù)集群。

其中，在所述在屬主元數(shù)據(jù)集群的訪問頻率大于預(yù)設(shè)閾值時，創(chuàng)建所述元數(shù)據(jù)集群的副本元數(shù)據(jù)集群之后，包括：

判斷副本元數(shù)據(jù)集群的訪問頻率是否高于所述屬主元數(shù)據(jù)集群的訪問頻率；

若不高于，則刪除所述副本元數(shù)據(jù)集群。

其中，所述遍歷所述臟目錄項，判斷所述臟目錄項所在的目錄分片中的臟目錄項是否均變更為干凈目錄項包括：

將所述臟目錄項添加到臟目錄項隊列中；

遍歷所述臟目錄項，判斷所述臟目錄項所在的目錄分片中的臟目錄項是否均變更為干凈目錄項。

其中，所述將所述臟目錄項添加到臟目錄項隊列中包括：

將所述臟目錄項添加到LRU鏈表中，并將所述LRU鏈表標記為臟目錄項隊列。

其中，在所述將所述目錄分片寫回所述數(shù)據(jù)集群之后，包括：

將所述臟目錄項從所述LRU鏈表中移除。

本發(fā)明還提供了一種分布式文件系統(tǒng)中元數(shù)據(jù)的管理裝置，包括：

臟目錄項確定模塊：用于響應(yīng)于將元數(shù)據(jù)集群寫回數(shù)據(jù)集群的指令，確定所述元數(shù)據(jù)集群中的臟目錄項；