[發(fā)明專利]擴(kuò)容糾刪碼存儲系統(tǒng)的數(shù)據(jù)存儲方法、裝置、設(shè)備和介質(zhì)在審
| 申請?zhí)枺?/td> | 202211532481.1 | 申請日: | 2022-12-01 |
| 公開(公告)號: | CN116662061A | 公開(公告)日: | 2023-08-29 |
| 發(fā)明(設(shè)計(jì))人: | 程繼承;李新軍 | 申請(專利權(quán))人: | 浙江宇視科技有限公司 |
| 主分類號: | G06F11/08 | 分類號: | G06F11/08;G06F3/06 |
| 代理公司: | 北京品源專利代理有限公司 11332 | 代理人: | 馬迪 |
| 地址: | 310051 浙江省杭州市濱江區(qū)西興街道江陵路*** | 國省代碼: | 浙江;33 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 擴(kuò)容 糾刪碼 存儲系統(tǒng) 數(shù)據(jù) 存儲 方法 裝置 設(shè)備 介質(zhì) | ||
1.一種擴(kuò)容糾刪碼存儲系統(tǒng)的數(shù)據(jù)存儲方法,其特征在于,包括:
基于預(yù)設(shè)糾刪碼結(jié)構(gòu),將待存儲文件拆分為第一數(shù)量個(gè)候選分片文件;其中,所述候選分片文件中包括第二數(shù)量個(gè)數(shù)據(jù)分片文件和第三數(shù)量個(gè)校驗(yàn)分片文件,所述第一數(shù)量為擴(kuò)容前糾刪碼存儲系統(tǒng)中的原存儲節(jié)點(diǎn)數(shù)量;
從所述候選分片文件中確定第四數(shù)量個(gè)目標(biāo)分片文件;其中,所述第四數(shù)量根據(jù)所述第三數(shù)量進(jìn)行確定,且第四數(shù)量大于或等于1;
將所述目標(biāo)分片文件存儲在擴(kuò)容存儲節(jié)點(diǎn)中,將剩余分片文件存儲在原存儲節(jié)點(diǎn)中;其中,每個(gè)原存儲節(jié)點(diǎn)所存儲的分片文件的數(shù)量小于或等于1。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,從所述候選分片文件中確定第四數(shù)量個(gè)目標(biāo)分片文件,包括:
從所述候選分片文件中確定至多一個(gè)數(shù)據(jù)分片文件和至少一個(gè)校驗(yàn)分片文件,構(gòu)成目標(biāo)分片文件。
3.根據(jù)權(quán)利要求2所述的方法,其特征在于,所述第四數(shù)量小于或等于第三數(shù)量。
4.根據(jù)權(quán)利要求1所述的方法,其特征在于,在將剩余分片文件存儲在原存儲節(jié)點(diǎn)中之前,所述方法還包括:
確定原存儲節(jié)點(diǎn)中的歷史校驗(yàn)分片文件,并按照存儲時(shí)間對所述歷史校驗(yàn)分片文件進(jìn)行升序排序;
刪除排序在前的第五數(shù)量個(gè)歷史校驗(yàn)分片文件;其中,所述第五數(shù)量根據(jù)第四數(shù)量進(jìn)行確定。
5.根據(jù)權(quán)利要求4所述的方法,其特征在于,將剩余分片文件存儲在原存儲節(jié)點(diǎn)中,包括:
確定原存儲節(jié)點(diǎn)中的已存分片文件數(shù)量,并根據(jù)已存分片文件數(shù)量對原存儲節(jié)點(diǎn)進(jìn)行升序排序;
選擇排序在前的第六數(shù)量個(gè)目標(biāo)原存儲節(jié)點(diǎn),并將所述剩余分片文件分別存儲在目標(biāo)原存儲節(jié)點(diǎn)中;其中,第六數(shù)量等于第一數(shù)量和第四數(shù)量的差值。
6.根據(jù)權(quán)利要求1所述的方法,其特征在于,將所述目標(biāo)分片文件存儲在擴(kuò)容存儲節(jié)點(diǎn)中,將剩余分片文件存儲在原存儲節(jié)點(diǎn)中之后,所述方法還包括:
判斷所述原存儲節(jié)點(diǎn)和所述擴(kuò)容存儲節(jié)點(diǎn)組成的存儲集群是否數(shù)據(jù)均衡;
若數(shù)據(jù)均衡,則將后續(xù)待存儲文件拆分得到的候選分片文件均勻存儲在所有存儲節(jié)點(diǎn)中。
7.根據(jù)權(quán)利要求6所述的方法,其特征在于,判斷所述原存儲節(jié)點(diǎn)和所述擴(kuò)容存儲節(jié)點(diǎn)組成的存儲集群是否數(shù)據(jù)均衡,包括:
根據(jù)當(dāng)前均衡輪次是否到達(dá)均衡輪次閾值,判斷所述原存儲節(jié)點(diǎn)和所述擴(kuò)容存儲節(jié)點(diǎn)組成的存儲集群是否數(shù)據(jù)均衡;其中,所述均衡輪次閾值根據(jù)擴(kuò)容前單個(gè)原存儲節(jié)點(diǎn)的節(jié)點(diǎn)容量、所述第一數(shù)量、所述第二數(shù)量和所述第三數(shù)量進(jìn)行確定。
8.一種擴(kuò)容糾刪碼存儲系統(tǒng)的數(shù)據(jù)存儲裝置,其特征在于,包括:
文件拆分模塊,用于基于預(yù)設(shè)糾刪碼結(jié)構(gòu),將待存儲文件拆分為第一數(shù)量個(gè)候選分片文件;
其中,所述候選分片文件中包括第二數(shù)量個(gè)數(shù)據(jù)分片文件和第三數(shù)量個(gè)校驗(yàn)分片文件,所述第一數(shù)量為擴(kuò)容前糾刪碼存儲系統(tǒng)中的原存儲節(jié)點(diǎn)數(shù)量;
文件確定模塊,用于從所述候選分片文件中確定第四數(shù)量個(gè)目標(biāo)分片文件;其中,所述第四數(shù)量根據(jù)所述第三數(shù)量進(jìn)行確定,且第四數(shù)量大于或等于1;
文件存儲模塊,用于將所述目標(biāo)分片文件存儲在擴(kuò)容存儲節(jié)點(diǎn)中,將剩余分片文件存儲在原存儲節(jié)點(diǎn)中;
其中,每個(gè)原存儲節(jié)點(diǎn)所存儲的分片文件的數(shù)量小于或等于1。
9.一種電子設(shè)備,其特征在于,所述電子設(shè)備包括:
至少一個(gè)處理器;以及
與所述至少一個(gè)處理器通信連接的存儲器;其中,
所述存儲器存儲有可被所述至少一個(gè)處理器執(zhí)行的計(jì)算機(jī)程序,所述計(jì)算機(jī)程序被所述至少一個(gè)處理器執(zhí)行,以使所述至少一個(gè)處理器能夠執(zhí)行權(quán)利要求1-7中任一項(xiàng)所述的擴(kuò)容糾刪碼存儲系統(tǒng)的數(shù)據(jù)存儲方法。
10.一種計(jì)算機(jī)可讀存儲介質(zhì),其特征在于,所述計(jì)算機(jī)可讀存儲介質(zhì)存儲有計(jì)算機(jī)指令,所述計(jì)算機(jī)指令用于使處理器執(zhí)行時(shí)實(shí)現(xiàn)權(quán)利要求1-7中任一項(xiàng)所述的擴(kuò)容糾刪碼存儲系統(tǒng)的數(shù)據(jù)存儲方法。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于浙江宇視科技有限公司,未經(jīng)浙江宇視科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202211532481.1/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
- 實(shí)現(xiàn)存儲系統(tǒng)自動精簡配置動態(tài)擴(kuò)容的系統(tǒng)及方法
- 一種基于精簡配置的存儲空間批量擴(kuò)容的方法及裝置
- 一種數(shù)據(jù)庫擴(kuò)容方法及系統(tǒng)
- 基站擴(kuò)容方法、裝置、設(shè)備及存儲介質(zhì)
- 一種小區(qū)擴(kuò)容方法及系統(tǒng)
- 一種全文檢索系統(tǒng)擴(kuò)容方法、裝置、設(shè)備及介質(zhì)
- 一種擴(kuò)容包裝盒
- 一種分布式數(shù)據(jù)庫的在線擴(kuò)容方法
- 網(wǎng)絡(luò)擴(kuò)容方法及裝置
- 一種擴(kuò)容合理性的確定方法及裝置
- 發(fā)送裝置及發(fā)送方法
- 一種存儲系統(tǒng)糾刪碼編碼、解碼電路及編解碼電路
- 基于NVRAM存儲系統(tǒng)直接糾刪碼的優(yōu)化方法和系統(tǒng)
- 一種數(shù)據(jù)存儲、重構(gòu)方法和裝置、及電子設(shè)備
- 一種通過糾刪碼對數(shù)據(jù)的處理方法及裝置
- 一種基于糾刪碼的糾刪池的創(chuàng)建方法及相關(guān)裝置
- 一種糾刪碼讀請求處理方法、系統(tǒng)、設(shè)備及計(jì)算機(jī)介質(zhì)
- 數(shù)據(jù)操作方法、裝置和分布式存儲系統(tǒng)
- 一種基于糾刪碼的新媒體圖像的篡改恢復(fù)方法及裝置
- 一種數(shù)據(jù)處理方法、裝置、設(shè)備及介質(zhì)
- 用于處理到遠(yuǎn)程存儲位置的故障恢復(fù)的方法、系統(tǒng)以及程序
- 包括向外擴(kuò)展型存儲系統(tǒng)的存儲系統(tǒng)群及其管理方法
- 一種移動存儲系統(tǒng)及其存儲方法
- 存儲系統(tǒng)的數(shù)據(jù)備份與恢復(fù)系統(tǒng)、方法、設(shè)備及存儲介質(zhì)
- 在線遷移異構(gòu)系統(tǒng)數(shù)據(jù)的方法、裝置、設(shè)備和存儲介質(zhì)
- 建立存儲系統(tǒng)伙伴關(guān)系的方法及裝置
- 數(shù)據(jù)處理系統(tǒng)及其操作方法
- 一種容災(zāi)平臺及一種容災(zāi)方法
- 在基于云的存儲系統(tǒng)中服務(wù)I/O操作
- 一種數(shù)據(jù)修復(fù)方法及裝置
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法、數(shù)據(jù)系統(tǒng)、接收設(shè)備和數(shù)據(jù)讀取方法
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置、數(shù)據(jù)記錄媒體、數(shù)據(jù)重播方法和數(shù)據(jù)重播裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)發(fā)送系統(tǒng)、數(shù)據(jù)發(fā)送裝置以及數(shù)據(jù)結(jié)構(gòu)
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法及數(shù)據(jù)系統(tǒng)
- 數(shù)據(jù)嵌入裝置、數(shù)據(jù)嵌入方法、數(shù)據(jù)提取裝置及數(shù)據(jù)提取方法
- 數(shù)據(jù)管理裝置、數(shù)據(jù)編輯裝置、數(shù)據(jù)閱覽裝置、數(shù)據(jù)管理方法、數(shù)據(jù)編輯方法以及數(shù)據(jù)閱覽方法
- 數(shù)據(jù)發(fā)送和數(shù)據(jù)接收設(shè)備、數(shù)據(jù)發(fā)送和數(shù)據(jù)接收方法
- 數(shù)據(jù)發(fā)送裝置、數(shù)據(jù)接收裝置、數(shù)據(jù)收發(fā)系統(tǒng)、數(shù)據(jù)發(fā)送方法、數(shù)據(jù)接收方法和數(shù)據(jù)收發(fā)方法
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置





