[發(fā)明專利]一種元數(shù)據(jù)子樹(shù)遷移方法、裝置、設(shè)備及可讀存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 201910911892.3
• 申請(qǐng)日: 2019-09-25
• 公開(kāi)（公告）號(hào): CN110659249A
• 公開(kāi)（公告）日: 2020-01-07
• 發(fā)明（設(shè)計(jì)）人: 劉洪棟;張立強(qiáng)
• 申請(qǐng)（專利權(quán)）人: 浪潮電子信息產(chǎn)業(yè)股份有限公司
• 主分類號(hào): G06F16/11
• 分類號(hào): G06F16/11;G06F16/17;G06F16/182
• 代理公司: 11227 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司
• 代理人: 田媛媛

本發(fā)明公開(kāi)了一種元數(shù)據(jù)子樹(shù)遷移方法、裝置、設(shè)備及可讀存儲(chǔ)介質(zhì)，該方法包括以下步驟：監(jiān)控元數(shù)據(jù)子樹(shù)的冷熱狀態(tài)，并獲取元數(shù)據(jù)子樹(shù)的總數(shù)量；判斷總數(shù)量是否大于預(yù)設(shè)回遷閾值；如果是，則利用冷熱狀態(tài)確定出待回遷的目標(biāo)元數(shù)據(jù)子樹(shù)，并回遷目標(biāo)元數(shù)據(jù)子樹(shù)。該方法，通過(guò)在元數(shù)據(jù)子樹(shù)的總數(shù)量達(dá)到預(yù)設(shè)回遷閾值時(shí)，進(jìn)行回遷操作，可使得元數(shù)據(jù)子樹(shù)的總數(shù)量限制在一定數(shù)量范圍內(nèi)，可避免因元數(shù)據(jù)子樹(shù)的數(shù)量過(guò)多而導(dǎo)致增加額外的計(jì)算，可避免因元數(shù)據(jù)子樹(shù)的數(shù)量過(guò)多而影響業(yè)務(wù)性能。

技術(shù)領(lǐng)域

本發(fā)明涉及存儲(chǔ)技術(shù)領(lǐng)域，特別是涉及一種元數(shù)據(jù)子樹(shù)遷移方法、裝置、設(shè)備及可讀存儲(chǔ)介質(zhì)。

背景技術(shù)

分布式集群存儲(chǔ)在當(dāng)前大數(shù)據(jù)多種場(chǎng)景下(如高性能、視頻監(jiān)控、廣電媒資等)廣泛應(yīng)用。分布式文件系統(tǒng)中存在海量數(shù)據(jù)，大數(shù)據(jù)計(jì)算的前提是組織、存儲(chǔ)海量數(shù)據(jù)。多個(gè)元數(shù)據(jù)服務(wù)器組成元數(shù)據(jù)集群對(duì)外提供服務(wù)，可以提升元數(shù)據(jù)性能。

在元數(shù)據(jù)服務(wù)器中，元數(shù)據(jù)子樹(shù)(Subtree)的劃分為元數(shù)據(jù)集群提供業(yè)務(wù)并發(fā)的首要條件，不同的目錄可以數(shù)據(jù)不同的Subtree，不同的Subtree業(yè)務(wù)可以同時(shí)并發(fā)，進(jìn)而提升元數(shù)據(jù)性能。但是，Subtree數(shù)量過(guò)多同樣會(huì)導(dǎo)致增加額外的計(jì)算過(guò)多。所以，從另一個(gè)角度來(lái)說(shuō)，需要限制Subtree的數(shù)量，以防止Subtree過(guò)大，導(dǎo)致業(yè)務(wù)性能受限。

綜上所述，如何有效地解決元數(shù)據(jù)子樹(shù)數(shù)量控制等問(wèn)題，是目前本領(lǐng)域技術(shù)人員急需解決的技術(shù)問(wèn)題。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種元數(shù)據(jù)子樹(shù)遷移方法、裝置、設(shè)備及可讀存儲(chǔ)介質(zhì)，按照熱度以及元數(shù)據(jù)子樹(shù)的總數(shù)量，通過(guò)回遷元數(shù)據(jù)子樹(shù)進(jìn)行回遷，使得元數(shù)據(jù)子樹(shù)的數(shù)量在滿足業(yè)務(wù)細(xì)分需求的情況下，同時(shí)也不影響業(yè)務(wù)性能。

為解決上述技術(shù)問(wèn)題，本發(fā)明提供如下技術(shù)方案：

一種元數(shù)據(jù)子樹(shù)遷移方法，包括：

監(jiān)控元數(shù)據(jù)子樹(shù)的冷熱狀態(tài)，并獲取所述元數(shù)據(jù)子樹(shù)的總數(shù)量；

判斷所述總數(shù)量是否大于預(yù)設(shè)回遷閾值；

如果是，則利用所述冷熱狀態(tài)確定出待回遷的目標(biāo)元數(shù)據(jù)子樹(shù)，并回遷所述目標(biāo)元數(shù)據(jù)子樹(shù)。

優(yōu)選地，所述監(jiān)控元數(shù)據(jù)子樹(shù)的冷熱狀態(tài)，包括：

記錄所述元數(shù)據(jù)子樹(shù)目錄下的文件和/或目錄的訪問(wèn)次數(shù)；

利用所述訪問(wèn)次數(shù)確定出所述元數(shù)據(jù)子樹(shù)的熱度值。

優(yōu)選地，利用所述訪問(wèn)次數(shù)確定出所述元數(shù)據(jù)子樹(shù)的熱度值，包括：

結(jié)合熱度衰減規(guī)則，并利用所述訪問(wèn)次數(shù)計(jì)算所述熱度值；

相應(yīng)地，利用所述冷熱狀態(tài)確定出待回遷的目標(biāo)元數(shù)據(jù)子樹(shù)，包括：將所述熱度值小于預(yù)設(shè)熱度閾值的元數(shù)據(jù)子樹(shù)確定為所述目標(biāo)元數(shù)據(jù)子樹(shù)。

優(yōu)選地，還包括：

對(duì)所述元數(shù)據(jù)子樹(shù)目錄下的元數(shù)據(jù)數(shù)量進(jìn)行統(tǒng)計(jì)；

將所述元數(shù)據(jù)數(shù)量為0的元數(shù)據(jù)子樹(shù)確定為所述目標(biāo)元數(shù)據(jù)子樹(shù)。

優(yōu)選地，回遷所述目標(biāo)元數(shù)據(jù)子樹(shù)之后，包括：

記錄未回遷的所述元數(shù)據(jù)子樹(shù)對(duì)應(yīng)的子樹(shù)信息。

優(yōu)選地，還包括：

在進(jìn)行回放時(shí)，回放未回遷的所述元數(shù)據(jù)子樹(shù)對(duì)應(yīng)的元數(shù)據(jù)信息。

優(yōu)選地，在回遷所述目標(biāo)元數(shù)據(jù)子樹(shù)之后，還包括：

清除所述目標(biāo)元數(shù)據(jù)子樹(shù)對(duì)應(yīng)的子樹(shù)日志。

一種元數(shù)據(jù)子樹(shù)遷移裝置，包括：