[發(fā)明專利]分布式文件系統(tǒng)的存儲空間數(shù)據(jù)處理方法及裝置在審
| 申請?zhí)枺?/td> | 202010541216.4 | 申請日: | 2020-06-15 |
| 公開(公告)號: | CN111736772A | 公開(公告)日: | 2020-10-02 |
| 發(fā)明(設(shè)計)人: | 王啟宇;沈一帆;任政;白佳樂 | 申請(專利權(quán))人: | 中國工商銀行股份有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 北京三友知識產(chǎn)權(quán)代理有限公司 11127 | 代理人: | 王濤;湯在彥 |
| 地址: | 100140 北*** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 分布式 文件系統(tǒng) 存儲空間 數(shù)據(jù)處理 方法 裝置 | ||
本申請實施例提供一種分布式文件系統(tǒng)的存儲空間數(shù)據(jù)處理方法及裝置,方法包括:根據(jù)目標(biāo)存儲卷的存儲空間使用信息在設(shè)定時間周期內(nèi)的變化速率進行使用信息預(yù)測,得到存儲空間使用信息預(yù)測數(shù)據(jù);根據(jù)所述存儲空間使用信息預(yù)測數(shù)據(jù)和預(yù)設(shè)使用閾值的比對結(jié)果,對所述目標(biāo)存儲卷執(zhí)行對應(yīng)的存儲空間分配操作;本申請能夠準(zhǔn)確預(yù)測分布式文件系統(tǒng)中存儲空間的使用情況,及時、可靠地執(zhí)行相應(yīng)存儲空間調(diào)度操作,避免大文件寫入失敗的情況,保障系統(tǒng)穩(wěn)定運行。
技術(shù)領(lǐng)域
本申請涉及計算機技術(shù)領(lǐng)域,具體涉及一種分布式文件系統(tǒng)的存儲空間數(shù)據(jù)處理方法及裝置。
背景技術(shù)
目前使用的分布式文件存儲系統(tǒng)是一個基于宿主機的文件系統(tǒng)搭建的分布式文件系統(tǒng),該分布式文件系統(tǒng)將不同服務(wù)器上的文件系統(tǒng)作為存儲塊,多個存儲塊組成一個存儲卷后提供給使用者。該分布式文件系統(tǒng)在非條帶策略下通過調(diào)度將文件分布到不同存儲塊。
發(fā)明人發(fā)現(xiàn),如果存在一個不斷增加的大文件,使用者從存儲卷的視角看存儲卷依然有剩余空間,但當(dāng)它占滿一個存儲塊的時候就會寫入失敗,因為一個文件無法跨兩個存儲塊寫入,而現(xiàn)有技術(shù)無法做到對大文件寫入時可靠、靈活的存儲空間調(diào)度,進而很容易產(chǎn)生大文件寫入失敗的情況。
發(fā)明內(nèi)容
針對現(xiàn)有技術(shù)中的問題,本申請?zhí)峁┮环N分布式文件系統(tǒng)的存儲空間數(shù)據(jù)處理方法及裝置,能夠準(zhǔn)確預(yù)測分布式文件系統(tǒng)中存儲空間的使用情況,及時、可靠地執(zhí)行相應(yīng)存儲空間調(diào)度操作,避免大文件寫入失敗的情況,保障系統(tǒng)穩(wěn)定運行。
為了解決上述問題中的至少一個,本申請?zhí)峁┮韵录夹g(shù)方案:
第一方面,本申請?zhí)峁┮环N分布式文件系統(tǒng)的存儲空間數(shù)據(jù)處理方法,包括:
根據(jù)目標(biāo)存儲卷的存儲空間使用信息在設(shè)定時間周期內(nèi)的變化速率進行使用信息預(yù)測,得到存儲空間使用信息預(yù)測數(shù)據(jù);
根據(jù)所述存儲空間使用信息預(yù)測數(shù)據(jù)和預(yù)設(shè)使用閾值的比對結(jié)果,對所述目標(biāo)存儲卷執(zhí)行對應(yīng)的存儲空間分配操作。
進一步地,所述根據(jù)目標(biāo)存儲卷的存儲空間使用信息在設(shè)定時間周期內(nèi)的變化速率進行使用信息預(yù)測,得到存儲空間使用信息預(yù)測數(shù)據(jù),包括:
根據(jù)所述目標(biāo)存儲卷的最大使用率和使用率最大差值,確定第一矩陣參數(shù),其中,所述最大使用率和所述使用率最大差值是根據(jù)所述目標(biāo)存儲卷中各存儲塊的當(dāng)前使用率確定的;
根據(jù)所述最大使用率和所述使用率最大差值在設(shè)定歷史時間周期內(nèi)的變化速度和變化加速度,確定第二矩陣參數(shù);
根據(jù)所述最大使用率和所述使用率最大差值根據(jù)所述變化速度和所述變化加速度經(jīng)過設(shè)定未來時間周期后得到的期望最大使用率和期望使用率最大差值,確定第三矩陣參數(shù);
根據(jù)所述第一矩陣參數(shù)、所述第二矩陣參數(shù)以及所述第三矩陣參數(shù),確定卡爾曼濾波器的狀態(tài)轉(zhuǎn)移矩陣;
根據(jù)所述卡爾曼濾波器對所述最大使用率和所述使用率最大差值進行信息預(yù)測,得到最大使用率預(yù)測值和使用率最大差值預(yù)測值,并將所述最大使用率預(yù)測值和所述使用率最大差值預(yù)測值設(shè)定為存儲空間使用信息預(yù)測數(shù)據(jù)。
進一步地,所述根據(jù)所述存儲空間使用信息預(yù)測數(shù)據(jù)和預(yù)設(shè)使用閾值的比對結(jié)果,對所述目標(biāo)存儲卷執(zhí)行對應(yīng)的存儲空間分配操作,包括:
判斷所述最大使用率預(yù)測值是否大于第一預(yù)設(shè)使用閾值,且所述使用率最大差值預(yù)測值是否大于第二預(yù)設(shè)使用閾值,若是,則對所述目標(biāo)存儲卷執(zhí)行存儲空間數(shù)據(jù)均衡處理;
判斷所述最大使用率預(yù)測值是否大于第一預(yù)設(shè)使用閾值,且所述使用率最大差值預(yù)測值是否小于第二預(yù)設(shè)使用閾值,若是,則對所述目標(biāo)存儲卷執(zhí)行存儲空間擴容處理;
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于中國工商銀行股份有限公司,未經(jīng)中國工商銀行股份有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010541216.4/2.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06F 電數(shù)字?jǐn)?shù)據(jù)處理
G06F3-00 用于將所要處理的數(shù)據(jù)轉(zhuǎn)變成為計算機能夠處理的形式的輸入裝置;用于將數(shù)據(jù)從處理機傳送到輸出設(shè)備的輸出裝置,例如,接口裝置
G06F3-01 .用于用戶和計算機之間交互的輸入裝置或輸入和輸出組合裝置
G06F3-05 .在規(guī)定的時間間隔上,利用模擬量取樣的數(shù)字輸入
G06F3-06 .來自記錄載體的數(shù)字輸入,或者到記錄載體上去的數(shù)字輸出
G06F3-09 .到打字機上去的數(shù)字輸出
G06F3-12 .到打印裝置上去的數(shù)字輸出
- 數(shù)據(jù)處理設(shè)備,數(shù)據(jù)處理方法,和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理電路、數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法、數(shù)據(jù)處理控制方法
- 數(shù)據(jù)處理設(shè)備、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法及計算機可讀取的記錄介質(zhì)
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法以及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法以及數(shù)據(jù)處理程序
- 數(shù)據(jù)處理裝置、數(shù)據(jù)處理方法和數(shù)據(jù)處理程序





