[發(fā)明專利]分布式存儲(chǔ)系統(tǒng)的實(shí)現(xiàn)方法、裝置、介質(zhì)及存儲(chǔ)系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202110864117.4
• 申請(qǐng)日: 2021-07-29
• 公開（公告）號(hào): CN113568580A
• 公開（公告）日: 2021-10-29
• 發(fā)明（設(shè)計(jì)）人: 劉忻;袁龍浩
• 申請(qǐng)（專利權(quán)）人: 廣州市品高軟件股份有限公司
• 主分類號(hào): G06F3/06
• 分類號(hào): G06F3/06
• 代理公司: 廣州新諾專利商標(biāo)事務(wù)所有限公司 44100
• 代理人: 張玲春

本發(fā)明提供了分布式存儲(chǔ)系統(tǒng)的實(shí)現(xiàn)方法、裝置、介質(zhì)及存儲(chǔ)系統(tǒng)，實(shí)現(xiàn)方法包括步驟：設(shè)定副本放置組與糾刪放置組一一對(duì)應(yīng)關(guān)系，其中，副本放置組用于存放副本機(jī)制的數(shù)據(jù)切片，糾刪放置組用于放置糾刪機(jī)制的數(shù)據(jù)切片；在獲取到讀/寫數(shù)據(jù)切片請(qǐng)求時(shí)，如糾刪機(jī)制的數(shù)據(jù)切片熱度大于等于加熱閾值時(shí)，將糾刪機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為副本機(jī)制的數(shù)據(jù)切片；周期性對(duì)數(shù)據(jù)切片服務(wù)器每一個(gè)副本類型的數(shù)據(jù)切片進(jìn)行檢查，如副本機(jī)制的數(shù)據(jù)切片熱度小于等于冷卻閾值時(shí)，將副本機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為糾刪機(jī)制的數(shù)據(jù)切片。

技術(shù)領(lǐng)域

本發(fā)明屬于云網(wǎng)絡(luò)技術(shù)領(lǐng)域，具體涉及一種分布式存儲(chǔ)系統(tǒng)的實(shí)現(xiàn)方法、裝置、介質(zhì)及存儲(chǔ)系統(tǒng)。

背景技術(shù)

分布式存儲(chǔ)系統(tǒng)的存儲(chǔ)機(jī)制可以分為副本機(jī)制和糾刪機(jī)制，副本機(jī)制消耗空間較多，但讀寫性能較好，通常用于存放熱數(shù)據(jù)；糾刪機(jī)制節(jié)省存儲(chǔ)空間，但讀寫性能較差，通常用于存放溫、冷數(shù)據(jù)。然而，熱、溫、冷往往不是數(shù)據(jù)的固有特性，而是具有動(dòng)態(tài)性，會(huì)隨著時(shí)間改變。

在現(xiàn)有技術(shù)中，Ceph分布式文件系統(tǒng)使用cache tier的服務(wù)端緩存方案來解決上述問題，但采用該方案，增加了用戶使用和管理的復(fù)雜性。

發(fā)明內(nèi)容

為了解決上述問題，第一方面，本發(fā)明提供了一種分布式存儲(chǔ)系統(tǒng)的實(shí)現(xiàn)方法，包括步驟：

設(shè)定副本放置組與糾刪放置組的一一對(duì)應(yīng)關(guān)系，其中，副本放置組用于存放副本機(jī)制的數(shù)據(jù)切片，糾刪放置組用于放置糾刪機(jī)制的數(shù)據(jù)切片；

在獲取到讀/寫數(shù)據(jù)切片請(qǐng)求時(shí)，如糾刪機(jī)制的數(shù)據(jù)切片熱度大于等于加熱閾值時(shí)，將糾刪機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為副本機(jī)制的數(shù)據(jù)切片；

周期性對(duì)數(shù)據(jù)切片服務(wù)器每一個(gè)副本類型的數(shù)據(jù)切片進(jìn)行檢查，如副本機(jī)制的數(shù)據(jù)切片熱度小于等于冷卻閾值時(shí)，將副本機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為糾刪機(jī)制的數(shù)據(jù)切片。

作為本發(fā)明的進(jìn)一步改進(jìn)，所述對(duì)應(yīng)關(guān)系包括：

副本放置組數(shù)量與糾刪放置組數(shù)量相等，每一個(gè)副本放置組都對(duì)應(yīng)一個(gè)包含自身的糾刪放置組。

作為本發(fā)明的進(jìn)一步改進(jìn)，所述在獲取到讀/寫數(shù)據(jù)切片請(qǐng)求時(shí)，如糾刪機(jī)制的數(shù)據(jù)切片熱度大于等于加熱閾值時(shí)，將糾刪機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為副本機(jī)制的數(shù)據(jù)切片的步驟，包括如下步驟：

獲取到讀/寫數(shù)據(jù)切片請(qǐng)求；

確認(rèn)數(shù)據(jù)切片服務(wù)器為放置組的leader；

對(duì)數(shù)據(jù)切片的類型進(jìn)行判斷；

按照設(shè)定規(guī)則增加數(shù)據(jù)切片的熱度；

如是糾刪機(jī)制類型，則使用糾刪機(jī)制進(jìn)行讀寫；

當(dāng)糾刪機(jī)制的數(shù)據(jù)切片熱度大于等于加熱閾值時(shí)，將糾刪機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為副本機(jī)制的數(shù)據(jù)切片；

如是副本機(jī)制類型，則使用副本機(jī)制進(jìn)行讀寫。

作為本發(fā)明的進(jìn)一步改進(jìn)，所述當(dāng)糾刪機(jī)制的數(shù)據(jù)切片熱度大于等于加熱閾值時(shí)，將糾刪機(jī)制的數(shù)據(jù)切片轉(zhuǎn)換為副本機(jī)制的數(shù)據(jù)切片的步驟，包括如下步驟：

檢查副本放置組是否存在足夠空間放置副本機(jī)制的數(shù)據(jù)切片；

如有足夠的空間，則獲取對(duì)應(yīng)數(shù)據(jù)切片的寫鎖操作；

對(duì)每一個(gè)糾刪機(jī)制的數(shù)據(jù)切片，按照轉(zhuǎn)換規(guī)則進(jìn)行補(bǔ)全；

對(duì)糾刪機(jī)制的數(shù)據(jù)切片進(jìn)行標(biāo)記、刪除；

標(biāo)記對(duì)應(yīng)的數(shù)據(jù)切片為副本機(jī)制類型；

釋放對(duì)應(yīng)數(shù)據(jù)切片的寫鎖；

如沒有足夠的空間，則設(shè)置糾刪機(jī)制的數(shù)據(jù)切片的熱度進(jìn)行調(diào)整。