[發(fā)明專(zhuān)利]一種面向海量存儲(chǔ)設(shè)備的存儲(chǔ)池?cái)U(kuò)容方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 202010727814.0
• 申請(qǐng)日: 2020-07-26
• 公開(kāi)（公告）號(hào): CN111984190B
• 公開(kāi)（公告）日: 2023-01-06
• 發(fā)明（設(shè)計(jì)）人: 周暢業(yè)
• 申請(qǐng)（專(zhuān)利權(quán)）人: 蘇州浪潮智能科技有限公司
• 主分類(lèi)號(hào): G06F3/06
• 分類(lèi)號(hào): G06F3/06
• 代理公司: 濟(jì)南誠(chéng)智商標(biāo)專(zhuān)利事務(wù)所有限公司 37105
• 代理人: 李修杰

本發(fā)明提出了一種面向海量存儲(chǔ)設(shè)備的存儲(chǔ)池?cái)U(kuò)容方法和系統(tǒng)，該方法包括接收存儲(chǔ)池?cái)U(kuò)容的指令；根據(jù)接收的擴(kuò)容指令，實(shí)時(shí)采集存儲(chǔ)池的讀寫(xiě)頻率和剩余容量；根據(jù)存儲(chǔ)池待擴(kuò)容節(jié)點(diǎn)存儲(chǔ)介質(zhì)的類(lèi)型，選擇確定磁盤(pán)讀寫(xiě)頻率最高的存儲(chǔ)池，將待擴(kuò)容節(jié)點(diǎn)放入頻率最高的存儲(chǔ)池中；或者判斷讀寫(xiě)頻率與預(yù)設(shè)頻率閾值、存儲(chǔ)池已用容量與預(yù)設(shè)容量閾值之間的關(guān)系，選擇不同的擴(kuò)容模式。存儲(chǔ)介質(zhì)的類(lèi)型包括SSD硬盤(pán)和HDD硬盤(pán)。基于該方法，還提出了擴(kuò)容系統(tǒng)。本發(fā)明通過(guò)不斷采集集群帶寬和各個(gè)存儲(chǔ)池的使用情況，對(duì)不同介質(zhì)的存儲(chǔ)設(shè)備采用不同模式進(jìn)行擴(kuò)容，在提高存儲(chǔ)池?cái)U(kuò)容效率和充分利用擴(kuò)容進(jìn)來(lái)的osd的同時(shí)，減少人為誤操作對(duì)集群使用產(chǎn)生影響。

技術(shù)領(lǐng)域

本發(fā)明屬于海量存儲(chǔ)技術(shù)領(lǐng)域，特別涉及一種面向海量存儲(chǔ)設(shè)備的存儲(chǔ)池?cái)U(kuò)容方法和系統(tǒng)。

背景技術(shù)

在海量存儲(chǔ)時(shí)代，存儲(chǔ)池容量會(huì)隨著數(shù)據(jù)的累加逐漸減少，為了增加集群的靈活性和易用性，對(duì)存儲(chǔ)池容量進(jìn)行擴(kuò)容是一項(xiàng)最基本的功能。

目前，存儲(chǔ)池?cái)U(kuò)容的方式比較傳統(tǒng)，只是簡(jiǎn)單的將osd添加到集群中，然后通過(guò)移動(dòng)這些新增的osd(Object-based Storage Device，基于對(duì)象的存儲(chǔ)設(shè)備)至存儲(chǔ)池中，來(lái)改變存儲(chǔ)池的容量。現(xiàn)有的方法均致力于先將節(jié)點(diǎn)的osd放入集群指定位置，然后再通過(guò)移動(dòng)osd來(lái)實(shí)現(xiàn)存儲(chǔ)池?cái)U(kuò)容，但這樣的方式過(guò)于依賴(lài)人為操作，不能充分恰當(dāng)?shù)睦脭U(kuò)容進(jìn)來(lái)的osd，增加了誤操作的風(fēng)險(xiǎn)；而且屬于串行處理，徒增耗時(shí)，降低效率，嚴(yán)重影響集群的易用性。

發(fā)明內(nèi)容

為了解決上述技術(shù)問(wèn)題，本發(fā)明提出了一種面向海量存儲(chǔ)設(shè)備的存儲(chǔ)池?cái)U(kuò)容方法和系統(tǒng)，通過(guò)不斷采集集群帶寬和各個(gè)存儲(chǔ)池的使用情況，對(duì)不同介質(zhì)的存儲(chǔ)設(shè)備采用不同模式進(jìn)行擴(kuò)容，在提高存儲(chǔ)池?cái)U(kuò)容效率和充分利用擴(kuò)容進(jìn)來(lái)的osd的同時(shí)，提高了集群的靈活性。

為實(shí)現(xiàn)上述目的，本發(fā)明采用以下技術(shù)方案：

一種面向海量存儲(chǔ)設(shè)備的存儲(chǔ)池?cái)U(kuò)容方法，包括以下步驟：

接收存儲(chǔ)池?cái)U(kuò)容的指令；

根據(jù)接收的擴(kuò)容指令，實(shí)時(shí)采集存儲(chǔ)池的讀寫(xiě)頻率和剩余容量；

根據(jù)存儲(chǔ)池待擴(kuò)容節(jié)點(diǎn)存儲(chǔ)介質(zhì)的類(lèi)型，選擇確定磁盤(pán)讀寫(xiě)頻率最高的存儲(chǔ)池，將待擴(kuò)容節(jié)點(diǎn)放入所述頻率最高的存儲(chǔ)池中；或者判斷讀寫(xiě)頻率與預(yù)設(shè)頻率閾值、存儲(chǔ)池已用容量與預(yù)設(shè)容量閾值之間的關(guān)系，選擇頻率優(yōu)先擴(kuò)容模式或容量?jī)?yōu)先擴(kuò)容模式。

進(jìn)一步的，所述存儲(chǔ)池待擴(kuò)容節(jié)點(diǎn)存儲(chǔ)介質(zhì)的類(lèi)型包括SSD硬盤(pán)和HDD硬盤(pán)；

進(jìn)一步的，對(duì)于SSD硬盤(pán)，實(shí)時(shí)采集存儲(chǔ)池的讀寫(xiě)頻率和剩余容量，計(jì)算出磁盤(pán)讀寫(xiě)頻率最高的存儲(chǔ)池，然后將待擴(kuò)容節(jié)點(diǎn)放入所述頻率最高的存儲(chǔ)池中。

進(jìn)一步的，對(duì)于HDD硬盤(pán)，判斷讀寫(xiě)頻率與預(yù)設(shè)頻率閾值、存儲(chǔ)池已用容量與預(yù)設(shè)容量閾值之間的關(guān)系，選擇不同的擴(kuò)容模式。

進(jìn)一步的，所述對(duì)于HDD硬盤(pán)，判斷讀寫(xiě)頻率與預(yù)設(shè)頻率閾值、存儲(chǔ)池已用容量與預(yù)設(shè)容量閾值之間的關(guān)系，選擇不同的擴(kuò)容模式包括：

讀寫(xiě)頻率大于預(yù)設(shè)頻率閾值，且存儲(chǔ)池已用容量小于預(yù)設(shè)容量閾值，則選擇頻率優(yōu)先擴(kuò)容模式；

讀寫(xiě)頻率小于預(yù)設(shè)頻率閾值，且存儲(chǔ)池已用容量大于預(yù)設(shè)容量閾值，則選擇容量?jī)?yōu)先擴(kuò)容模式；

讀寫(xiě)頻率大于預(yù)設(shè)頻率閾值，且存儲(chǔ)池已用容量大于預(yù)設(shè)容量閾值，則對(duì)比超出頻率閾值百分比和超出預(yù)設(shè)容量閾值百分比；如果超出頻率閾值百分比大于超出預(yù)設(shè)容量閾值百分比，則選擇頻率優(yōu)先擴(kuò)容模式；如果超出頻率閾值百分比小于超出預(yù)設(shè)容量閾值百分比，則選擇容量?jī)?yōu)先擴(kuò)容模式；