[發(fā)明專利]一種元數(shù)據(jù)負(fù)載均衡方法、裝置、設(shè)備及可讀存儲(chǔ)介質(zhì)

有效

• 申請?zhí)枺?/td>: 202310161610.9
• 申請日: 2023-02-24
• 公開（公告）號: CN115952005B
• 公開（公告）日: 2023-05-30
• 發(fā)明（設(shè)計(jì)）人: 臧林劼
• 申請（專利權(quán)）人: 浪潮電子信息產(chǎn)業(yè)股份有限公司
• 主分類號: G06F9/50
• 分類號: G06F9/50;G06F16/11;G06F16/16;G06F16/182
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 王曉坤

1.一種元數(shù)據(jù)負(fù)載均衡方法，其特征在于，包括：

獲取分布式文件存儲(chǔ)集群中各元數(shù)據(jù)服務(wù)分別對應(yīng)的元數(shù)據(jù)負(fù)載壓力信息；

根據(jù)各所述元數(shù)據(jù)負(fù)載壓力信息確定元數(shù)據(jù)遷移時(shí)刻、待元數(shù)據(jù)遷移的各目標(biāo)元數(shù)據(jù)服務(wù)及各所述目標(biāo)元數(shù)據(jù)服務(wù)之間的待遷移元數(shù)據(jù)數(shù)量；

獲取各所述目標(biāo)元數(shù)據(jù)服務(wù)中各子樹分區(qū)分別對應(yīng)的遷移參數(shù)；

根據(jù)各所述遷移參數(shù)確定導(dǎo)出子樹分區(qū)和導(dǎo)入子樹分區(qū)；

當(dāng)達(dá)到所述元數(shù)據(jù)遷移時(shí)刻時(shí)，將所述待遷移元數(shù)據(jù)數(shù)量的元數(shù)據(jù)從所述導(dǎo)出子樹分區(qū)遷移至所述導(dǎo)入子樹分區(qū)。

2.根據(jù)權(quán)利要求1所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，獲取分布式文件存儲(chǔ)集群中各元數(shù)據(jù)服務(wù)分別對應(yīng)的元數(shù)據(jù)負(fù)載壓力信息，包括：

通過部署于所述分布式文件存儲(chǔ)集群中各所述元數(shù)據(jù)服務(wù)的負(fù)載監(jiān)視器獲取各所述元數(shù)據(jù)服務(wù)分別對應(yīng)的元數(shù)據(jù)負(fù)載壓力信息。

3.根據(jù)權(quán)利要求1所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，根據(jù)各所述元數(shù)據(jù)負(fù)載壓力信息確定元數(shù)據(jù)遷移時(shí)刻、待元數(shù)據(jù)遷移的各目標(biāo)元數(shù)據(jù)服務(wù)及各所述目標(biāo)元數(shù)據(jù)服務(wù)之間的待遷移元數(shù)據(jù)數(shù)量，包括：

通過設(shè)置于預(yù)選元數(shù)據(jù)服務(wù)的元數(shù)據(jù)遷移啟動(dòng)程序，根據(jù)各所述元數(shù)據(jù)負(fù)載壓力信息確定所述元數(shù)據(jù)遷移時(shí)刻、待元數(shù)據(jù)遷移的各所述目標(biāo)元數(shù)據(jù)服務(wù)及各所述目標(biāo)元數(shù)據(jù)服務(wù)之間的待遷移元數(shù)據(jù)數(shù)量。

4.根據(jù)權(quán)利要求1至3任一項(xiàng)所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，獲取各所述目標(biāo)元數(shù)據(jù)服務(wù)中各子樹分區(qū)分別對應(yīng)的遷移參數(shù)，包括：

通過部署于各所述元數(shù)據(jù)服務(wù)的負(fù)載分析組件獲取各所述目標(biāo)元數(shù)據(jù)服務(wù)中各子樹分區(qū)分別對應(yīng)的遷移參數(shù)；

根據(jù)各所述遷移參數(shù)確定導(dǎo)出子樹分區(qū)和導(dǎo)入子樹分區(qū)，包括：

通過部署于各所述元數(shù)據(jù)服務(wù)的子樹選擇組件根據(jù)各所述遷移參數(shù)確定所述導(dǎo)出子樹分區(qū)和所述導(dǎo)入子樹分區(qū)。

5.根據(jù)權(quán)利要求4所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，通過部署于各所述元數(shù)據(jù)服務(wù)的負(fù)載分析組件獲取各所述目標(biāo)元數(shù)據(jù)服務(wù)中各子樹分區(qū)分別對應(yīng)的遷移參數(shù)，包括：

通過部署于各所述元數(shù)據(jù)服務(wù)的負(fù)載分析組件獲取各所述目標(biāo)元數(shù)據(jù)服務(wù)中各子樹分區(qū)分別對應(yīng)的遷移參數(shù)和所述分布式文件存儲(chǔ)集群的工作負(fù)載I/O?模式；

通過部署于各所述元數(shù)據(jù)服務(wù)的子樹選擇組件根據(jù)各所述遷移參數(shù)確定所述導(dǎo)出子樹分區(qū)和所述導(dǎo)入子樹分區(qū)，包括：

當(dāng)確定所述工作負(fù)載I/O模式為元數(shù)據(jù)密集型IO時(shí)，通過部署于各所述元數(shù)據(jù)服務(wù)的子樹選擇組件根據(jù)各所述遷移參數(shù)確定所述導(dǎo)出子樹分區(qū)和所述導(dǎo)入子樹分區(qū)。

6.根據(jù)權(quán)利要求4所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，通過部署于各所述元數(shù)據(jù)服務(wù)的負(fù)載分析組件獲取各所述目標(biāo)元數(shù)據(jù)服務(wù)中各子樹分區(qū)分別對應(yīng)的遷移參數(shù)，包括：

通過部署于各所述元數(shù)據(jù)服務(wù)的負(fù)載分析組件統(tǒng)計(jì)各所述子樹分區(qū)分別對應(yīng)的歷史工作負(fù)載；

根據(jù)各所述歷史工作負(fù)載確定各所述子樹分區(qū)的元數(shù)據(jù)訪問差異；

根據(jù)所述元數(shù)據(jù)訪問差異確定各子樹分區(qū)分別對應(yīng)的遷移參數(shù)。

7.根據(jù)權(quán)利要求6所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，根據(jù)所述元數(shù)據(jù)訪問差異確定各子樹分區(qū)分別對應(yīng)的遷移參數(shù)，包括：

獲取預(yù)設(shè)的元數(shù)據(jù)最大吞吐量；

當(dāng)確定存在大于所述元數(shù)據(jù)最大吞吐量的歷史工作負(fù)載時(shí)，根據(jù)所述元數(shù)據(jù)訪問差異確定各所述子樹分區(qū)分別對應(yīng)的遷移參數(shù)。

8.根據(jù)權(quán)利要求6所述的元數(shù)據(jù)負(fù)載均衡方法，其特征在于，在根據(jù)各所述遷移參數(shù)確定導(dǎo)出子樹分區(qū)和導(dǎo)入子樹分區(qū)之后，還包括：

當(dāng)分別在各所述元數(shù)據(jù)服務(wù)中維護(hù)的歷史元數(shù)據(jù)訪問請求表中存在體現(xiàn)空間局部性的歷史元數(shù)據(jù)訪問請求表時(shí)，從與所述導(dǎo)出子樹分區(qū)同級的子樹分區(qū)中選取目標(biāo)子樹分區(qū)；

將所述目標(biāo)子樹分區(qū)的遷移參數(shù)增加預(yù)設(shè)值。