[發明專利]一種數據對象存儲方法、裝置及存儲介質

在審

• 申請號: 202011282908.8
• 申請日: 2020-11-17
• 公開（公告）號: CN112596973A
• 公開（公告）日: 2021-04-02
• 發明（設計）人: 閔順新
• 申請（專利權）人: 新華三大數據技術有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F3/06
• 代理公司: 暫無信息
• 代理人: 暫無信息

本公開提供一種數據對象存儲方法、裝置及存儲介質，用于解決數據均衡及業務連續性的技術問題。本公開中，通過ROW模塊從監控節點獲取健康PG列表，將接收到的用戶數據對象轉換為ROW對象，采用預設的數據均衡分布算法從健康PG列表中選定用于存放ROW對象的映射PG，為ROW對象分配ROW對象標識，ROW對象標識包括：ROW模塊標識、映射PG的標識及序列號，然后將ROW對象寫入映射PG中的OSD。通過本公開能夠實現ROW對象的均衡存儲，提高業務連續性。

技術領域

本公開涉及存儲集群技術領域，尤其涉及一種數據對象存儲方法、裝置及存儲介質。

背景技術

在Ceph存儲集群中包括多個存儲節點，每個存儲節點下掛一個或多個對象存儲設備(Object Storage Device，OSD)。待寫入存儲空間的用戶數據在形成用戶數據對象后首先發給存儲節點，存儲節點計算用戶數據對象標識的HASH值，然后用計算所得的HASH值對尋址放置策略組(Placement Group，PG)的數目取模，從而確定出需要將用戶數據對象寫入到哪個PG，此種用戶數據對象的寫入規則雖然能夠一定程度上保障數據分布的均衡性，但也可能會導致將用戶數據寫入到不健康的PG的問題從而影響業務連續性，而且存儲節點無法靈活決策用戶數據對象的寫入位置。

發明內容

有鑒于此，本公開提供一種數據對象存儲方法、裝置及存儲介質，用于解決業務連續性和數據均衡性的技術問題。

基于本公開一實施例，提供了一種數據對象存儲方法，該方法應用于存儲集群中的存儲節點，該方法包括：

從監控節點獲取健康尋址放置策略組PG列表；

將接收到的用戶數據對象轉換為寫時重定向ROW對象，采用預設的數據均衡分布算法從所述健康PG列表中選定用于存放所述ROW對象的映射PG，為所述ROW對象分配ROW對象標識，所述ROW對象標識包括：ROW模塊標識、映射PG的標識及序列號；

將所述ROW對象寫入所述映射PG中的對象存儲設備OSD。

進一步地，所述健康PG列表中包括每個健康PG的權重值，所述PG的權重值基于PG的數據容量信息確定；所述采用預設的數據均衡分布算法從所述健康PG列表中選定用于存放所述ROW對象的映射PG具體為：在綜合PG的權重值的基礎上采用預設的數據均衡分布算法從所述健康PG列表中選定用于存放所述ROW對象的映射PG。

進一步地，所述的預設的數據均衡分布算法為平滑加權輪詢算法。

進一步地，周期性從所述監控節點獲取健康PG列表；所述健康PG列表根據OSD定期向監控節點上報的PG健康狀態確定。

進一步地，所述PG的權重值由OSD上報給所述監控節點，由監控節點根據PG的數據容量信息計算獲得，可用存儲空間越大的PG的權重值越大。

基于本發明另一實施例，還提供了一種數據對象存儲裝置，該裝置應用于存儲集群中的存儲節點，該裝置包括：

列表獲取模塊，用于從監控節點獲取健康尋址放置策略組PG列表；

對象生成模塊，用于將接收到的用戶數據對象轉換為寫時重定向ROW對象，采用預設的數據均衡分布算法從所述健康PG列表中選定用于存放所述ROW對象的映射PG，為所述ROW對象分配ROW對象標識，所述ROW對象標識包括：ROW模塊標識、映射PG的標識及序列號；

下發模塊，用于將所述ROW對象寫入所述映射PG中的對象存儲設備OSD。

進一步地，所述健康PG列表中包括每個健康PG的權重值，所述PG的權重值基于PG的數據容量信息確定；所述對象生成模塊在綜合PG的權重值的基礎上采用預設的數據均衡分布算法從所述健康PG列表中選定用于存放所述ROW對象的映射PG。