[發明專利]一種對象存儲方法及裝置

有效

• 申請號: 201811580291.0
• 申請日: 2018-12-24
• 公開（公告）號: CN111352577B
• 公開（公告）日: 2023-03-14
• 發明（設計）人: 鄭波榮
• 申請（專利權）人: 杭州海康威視系統技術有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;G06F9/50
• 代理公司: 北京博思佳知識產權代理有限公司 11415
• 代理人: 林祥

本申請提供一種對象存儲方法及裝置，應用于分布式存儲系統的網關中，所述分布式存儲系統還包括至少一個存儲節點，所述方法包括：接收客戶端上傳的數據上傳請求，所述數據上傳請求包括對象標識ID和對象大小K；根據所述對象大小K和所述分布式存儲系統中各在線存儲節點的剩余存儲空間，按照負載均衡方式確定各在線存儲節點中用于存儲所述對象標識ID對應的對象數據的對象分片大小，其中，所述在線存儲節點中的所述對象分片大小之和為所述對象大小K；控制待存儲的所述對象標識ID對應的對象數據按照各在線存儲節點的所述對象分片大小存儲至各在線存儲節點，以此確保分布式存儲系統中存儲節點的容量達到均攤，達到了各在線存儲節點負載均衡的效果。

技術領域

本申請涉及存儲技術領域，尤其涉及一種對象存儲方法及裝置。

背景技術

在存儲技術領域中，主要包括三大存儲方式，分別為文件(File)存儲、塊(Block)存儲與對象存儲(Object-based Storage)。其中，文件存儲是一種將獨立的數據整合為集中化管理的數據中心，以便于對不同主機和應用服務器進行訪問的技術；塊存儲指的是在一個獨立磁盤冗余陣列(RAID)集中，一個控制器加入一組磁盤驅動器，然后提供固定大小的RAID塊作為邏輯單元號(LUN)的卷；對象存儲是一種新的網絡存儲架構，對象包含數據，且每個對象都在一個被稱作存儲池的扁平地址空間的同一級別里。

在現有技術中，對象存儲系統中通常由中心管理節點管理對象索引信息，當數據對象達到千萬級別時，中心管理節點的數據庫壓力急劇上升，當中心管理節點巖機或者出現其它異常時，無法對外提供服務，使得系統的穩定無法保證。

發明內容

有鑒于此，本申請提供一種對象存儲方法及裝置。

具體地，本申請是通過如下技術方案實現的：

第一方面，本申請提供了一種對象存儲方法，所述方法應用于分布式存儲系統的網關中，所述分布式存儲系統還包括至少一個存儲節點，所述方法包括：

接收客戶端上傳的數據上傳請求，所述數據上傳請求包括對象標識ID和對象大小K；

根據所述對象大小K和所述分布式存儲系統中各在線存儲節點的剩余存儲空間，按照負載均衡方式確定各在線存儲節點中用于存儲所述對象標識ID對應的對象數據的對象分片大小，其中，所述在線存儲節點中的所述對象分片大小之和為所述對象大小K；

控制待存儲的所述對象標識ID對應的對象數據按照各在線存儲節點的所述對象分片大小存儲至各在線存儲節點。

優選地，所述根據所述對象大小K和所述分布式存儲系統中各在線存儲節點的剩余存儲空間，按照負載均衡方式確定各在線存儲節點中用于存儲所述對象標識ID對應的對象數據的對象分片大小，包括：

獲取所述分布式存儲系統中各在線存儲節點的剩余存儲空間；

針對每個在線存儲節點，根據該在線存儲節點的剩余存儲空間以及所述分布式存儲系統的總剩余空間計算該在線存儲節點的剩余空間比例，并根據該在線存儲節點的剩余空間比例以及所述對象大小K確定該在線存儲節點中用于存儲所述對象標識ID對應的對象數據的對象分片大小，其中，所述分布式存儲系統的總剩余空間為各個在線存儲節點的剩余存儲空間之和。

優選地，所述獲取所述分布式存儲系統中各在線存儲節點的剩余存儲空間，包括：

獲取各存儲節點的狀態信息，所述狀態信息至少包括：在線標識、剩余存儲空間，其中，當所述在線標識為第一值時表示所述存儲節點在線，當所述在線標識為第二值時表示所述存儲節點離線；

將所述狀態信息中在線標識為第一值的各存儲節點確定為在線存儲節點；

從已獲取的各在線存儲節點的狀態信息中獲取各在線存儲節點的剩余存儲空間。

優選地，所述獲取各存儲節點的狀態信息，包括：