[發(fā)明專利]一種元數(shù)據(jù)緩存方法、系統(tǒng)及相關裝置

有效

• 申請?zhí)枺?/td>: 201811585056.2
• 申請日: 2018-12-24
• 公開（公告）號: CN109471843B
• 公開（公告）日: 2021-08-10
• 發(fā)明（設計）人: 李長春
• 申請（專利權）人: 鄭州云海信息技術有限公司
• 主分類號: G06F16/172
• 分類號: G06F16/172;G06F16/16;G06F16/13
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 羅滿

本申請所提供的一種元數(shù)據(jù)緩存方法，包括：接收緩存元數(shù)據(jù)的請求指令；根據(jù)請求指令對元數(shù)據(jù)進行精簡處理，得到精簡元數(shù)據(jù)；將精簡元數(shù)據(jù)緩存至存儲節(jié)點中的預設緩存區(qū)。該方法先是接收緩存元數(shù)據(jù)的請求指令，再根據(jù)請求指令對元數(shù)據(jù)進行精簡處理，得到精簡元數(shù)據(jù)，最后將精簡元數(shù)據(jù)緩存至存儲節(jié)點中的預設緩存區(qū)。可見，該方法相比于相關技術對元數(shù)據(jù)進行了精簡處理，能夠在存儲節(jié)點總內存不變的情況下提高緩存的元數(shù)據(jù)總量，進而提高文件的讀取速度。本申請還提供一種元數(shù)據(jù)緩存系統(tǒng)、設備及計算機可讀存儲介質，均具有上述有益效果。

技術領域

本申請涉及元數(shù)據(jù)緩存技術領域，特別涉及一種元數(shù)據(jù)緩存方法、系統(tǒng)、設備及計算機可讀存儲介質。

背景技術

分布式文件系統(tǒng)的海量小文件場景中的性能問題一直是個很難突破的技術難題。在分布式文件系統(tǒng)中，如果訪問文件不能夠在本地命中緩存，基于分布式文件系統(tǒng)的特征每次訪問文件都需要在集群網(wǎng)絡內部訪問元數(shù)據(jù)，一次IO讀寫的執(zhí)行過程也可能會跨網(wǎng)絡讀取元數(shù)據(jù)，每次文件操作都去跨網(wǎng)絡獲取元數(shù)據(jù)增大了文件讀取的時延，故需要對元數(shù)據(jù)進行緩存，但是相關技術中直接對元數(shù)據(jù)進行緩存，在存儲節(jié)點總內存不變的情況下緩存的元數(shù)據(jù)總量較少，導致在讀取文件的時候，很難做到命中緩存，從而導致讀取文件的時候需要遍歷查找文件，大大增加了讀取時延，降低的文件的讀取速度。

因此，如何在存儲節(jié)點總內存不變的情況下提高緩存的元數(shù)據(jù)總量，進而提高文件的讀取速度是本領域技術人員需要解決的技術問題。

發(fā)明內容

本申請的目的是提供一種元數(shù)據(jù)緩存方法、系統(tǒng)、設備及計算機可讀存儲介質，能夠在存儲節(jié)點總內存不變的情況下提高緩存的元數(shù)據(jù)總量，進而提高文件的讀取速度。

為解決上述技術問題，本申請?zhí)峁┮环N元數(shù)據(jù)緩存方法，包括：

接收緩存元數(shù)據(jù)的請求指令；

根據(jù)所述請求指令對所述元數(shù)據(jù)進行精簡處理，得到精簡元數(shù)據(jù)；

將所述精簡元數(shù)據(jù)緩存至存儲節(jié)點中的預設緩存區(qū)。

優(yōu)選地，將所述精簡元數(shù)據(jù)緩存至存儲節(jié)點中的預設緩存區(qū)之后，還包括：

在讀取目標元數(shù)據(jù)時，判斷所述預設緩存區(qū)中是否存在所述目標元數(shù)據(jù)；

若是，則從所述預設緩存區(qū)中讀取所述目標元數(shù)據(jù)；

若否，則從所述存儲節(jié)點的內存中讀取所述目標元數(shù)據(jù)。

優(yōu)選地，從所述存儲節(jié)點的內存中讀取所述目標元數(shù)據(jù)之后，還包括：

對所述目標元數(shù)據(jù)進行所述精簡處理，得到目標精簡元數(shù)據(jù)；

將所述目標精簡元數(shù)據(jù)緩存至所述存儲節(jié)點中的所述預設緩存區(qū)。

優(yōu)選地，所述根據(jù)所述請求指令對所述元數(shù)據(jù)進行精簡處理，得到精簡元數(shù)據(jù)，包括：

根據(jù)所述請求指令，剔除所述元數(shù)據(jù)中的業(yè)務運行數(shù)據(jù)，得到所述精簡元數(shù)據(jù)。

本申請?zhí)峁邮站彺嬖獢?shù)據(jù)的請求指令之后，還包括：

判斷所述元數(shù)據(jù)的數(shù)量是否達到預設閾值；

若是，則執(zhí)行所述根據(jù)所述請求指令對所述元數(shù)據(jù)進行精簡處理，得到精簡元數(shù)據(jù)的步驟。

本申請還提供一種元數(shù)據(jù)緩存系統(tǒng)，包括：

請求指令接收模塊，用于接收緩存元數(shù)據(jù)的請求指令；

精簡處理模塊，用于根據(jù)所述請求指令對所述元數(shù)據(jù)進行精簡處理，得到精簡元數(shù)據(jù)；

元數(shù)據(jù)緩存模塊，用于將所述精簡元數(shù)據(jù)緩存至存儲節(jié)點中的預設緩存區(qū)。

優(yōu)選地，該元數(shù)據(jù)緩存系統(tǒng)還包括：