[發明專利]數據存儲方法、讀取方法、裝置、設備及存儲介質有效
| 申請號: | 201911354801.7 | 申請日: | 2019-12-25 |
| 公開(公告)號: | CN111399764B | 公開(公告)日: | 2023-04-14 |
| 發明(設計)人: | 方毅;黃華東;夏偉強;王偉 | 申請(專利權)人: | 杭州??低曄到y技術有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 北京三高永信知識產權代理有限責任公司 11138 | 代理人: | 李珂珂 |
| 地址: | 310051 浙江省杭州*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 數據 存儲 方法 讀取 裝置 設備 介質 | ||
本申請公開了一種數據存儲、數據讀取方法、裝置、設備及存儲介質,屬于數據存儲技術領域。所述方法應用于分布式存儲系統的多個存儲節點中的調度存儲節點,該調度存儲節點是由管理節點從該多個存儲節點中為當前待存儲的對象數據選擇的,該方法包括:接收該對象數據;對該對象數據進行條帶化處理,得到多個條帶數據;根據該多個存儲節點當前的資源信息,確定該多個條帶數據的存儲位置信息;根據該多個條帶數據的存儲位置信息,生成該多個條帶數據的條帶索引信息;將該多個條帶數據和該條帶索引信息存儲至該多個存儲節點中。如此,可以避免將所有對象元數據都存儲至管理節點給管理節點帶來巨大的存儲壓力。
技術領域
本申請涉及數據存儲技術領域,特別涉及一種數據存儲方法、讀取方法、裝置、設備及存儲介質。
背景技術
目前,對象存儲在數據存儲技術領域得到廣泛應用。其中,對象存儲是指將數據以對象的形式進行存儲,對象通常包括對象標識、對象數據、對象元數據,對象數據是指具體業務數據,如視頻、圖片等,對象元數據用于描述對象數據,比如可以為對象數據的時間、大小、索引等描述性信息。
通常情況下,可以采用分布式存儲系統進行對象存儲,分布式存儲系統一般包括客戶端、管理節點和多個存儲節點。在數據存儲時,管理節點可以為客戶端分配存儲節點,并將所分配的存儲節點的地址信息發送給客戶端,如此,客戶端即可以將對象數據存儲至該地址信息指向的存儲節點中。存儲節點生成對象數據的索引信息,并將包括該索引信息的對象元數據發送給管理節點進行存儲。
然而,當將對象數據切成數據塊,并將數據塊分布存儲于不同存儲節點中時,該索引信息包含的信息量較多,在該種情況下,由于包括索引信息的對象元數據集中存儲于管理節點中,因此,導致管理節點的存儲壓力較大。
發明內容
本申請實施例提供了一種數據存儲方法、讀取方法、裝置、設備及存儲介質,可以解決相關技術中所有對象元數據集中存儲于管理節點導致管理節點的存儲壓力和訪問壓力較大的問題。所述技術方案如下:
一方面,提供了一種數據存儲方法,應用于分布式存儲系統的多個存儲節點中的調度存儲節點,所述調度存儲節點是由管理節點從所述多個存儲節點中為當前待存儲的對象數據選擇的,所述方法包括:
接收所述對象數據;
對所述對象數據進行條帶化處理,得到多個條帶數據;
根據所述多個存儲節點當前的資源信息,確定所述多個條帶數據的存儲位置信息;
根據所述多個條帶數據的存儲位置信息,生成所述多個條帶數據的條帶索引信息;
將所述多個條帶數據和所述條帶索引信息存儲至所述多個存儲節點中。
在本申請一種可能的實現方式中,所述將所述多個條帶數據和所述條帶索引信息存儲至所述多個存儲節點中之前,還包括:
生成所述多個條帶數據的條帶數據標識;
相應地,所述將所述多個條帶數據和所述條帶索引信息存儲至所述多個存儲節點中,包括:
將所述多個條帶數據存儲至所述多個存儲節點中,以及將所述多個條帶數據的條帶數據標識與條帶索引信息對應存儲至所述多個存儲節點中。
在本申請一種可能的實現方式中,所述將所述多個條帶數據存儲至所述多個存儲節點中,以及將所述多個條帶數據的條帶數據標識與條帶索引信息對應存儲至所述多個存儲節點中,包括:
在本地存儲目標條帶數據,以及將所述目標條帶數據的條帶數據標識與索引信息對應存儲至本地,所述目標條帶數據是指需要本端存儲的條帶數據;
將所述多個條帶數據中除所述目標條帶數據之外的其他條帶數據、其他條帶數據的條帶數據標識和條帶索引信息發送至其他存儲節點進行存儲。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于杭州??低曄到y技術有限公司,未經杭州海康威視系統技術有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201911354801.7/2.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:一種手持式斷路器校驗裝置
- 下一篇:太陽能電池模塊
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





