[發明專利]分布式存儲系統中元數據存儲方法、系統及存儲介質

有效

• 申請號: 201710508014.8
• 申請日: 2017-06-28
• 公開（公告）號: CN109144406B
• 公開（公告）日: 2020-08-07
• 發明（設計）人: 饒蓉;魏明昌
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06;H04L29/08;G06F11/14
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 熊永強;李稷芳

公開了一種分布式存儲系統中元數據存儲方法，在分布式存儲系統中，在EC算法組成的元數據分條實現數據可靠性的場景下，主數據存儲節點備份元數據分條中其他元數據塊，因為只需要將數據存儲節點上的元數據塊在主數據存儲節點上備份，相比現有技術中所有元數據塊多副本，減少了存儲空間，同時在客戶端訪問元數據時，只需要從主數據存儲節點訪問所有元數據塊，提高了元數據訪問速度。

技術領域

本發明涉及數據存儲技術領域，尤其涉及一種分布式存儲系統中元數據存儲方法、系統及存儲介質。

背景技術

在分布式存儲系統中，管理節點將用戶數據存儲到存儲節點后，會產生記錄數據的邏輯地址，物理地址等的元數據，元數據也要存儲到存儲節點。常見的元數據存儲方式是將元數據分條中的塊打散到各存儲節點，讀取該元數據時，需要從各存儲節點讀取元數據分條中的塊，拼湊成元數據分條，但存儲節點間數據轉發量大，影響性能。另外一種方式元數據在存儲節點以多副本形式存儲，但會增加存儲空間開銷。

發明內容

第一方面，本發明實施例提供了一種分布式存儲系統中元數據存儲方案，在所述分布式存儲系統中包含管理節點和(M+N)個存儲節點，所述管理節點和(M+N)個存儲節點均存儲有元數據分條的分區視圖；所述元數據分條的分區視圖包含主數據存儲節點DS_A、數據存儲節點DS_i和校驗存儲節點CS_r；其中，N為不小于2的自然數，M為不小于1的自然數，A為自然數1至N中的一個，i為自然數1至N中的除A外的每一個，r為自然數1至M中的每一個；在所述存儲方案中：所述管理節點根據所述元數據分條的分區視圖為所述元數據分條確定主數據存儲節點DS_A、數據存儲節點DS_i和校驗存儲節點CS_r；所述元數據分條包含元數據塊D_A、D_i以及校驗塊C_r，將D_i發送到所述數據存儲節點DS_i，將D_A發送到所述主數據存儲節點DS_A，將Cr發送到所述校驗存儲節點CS_r；所述校驗存儲節點CS_r接收并存儲C_r；所述數據存儲節點DS_i接收并存儲D_i，并根據所述元數據分條的分區視圖將D_i發送到所述主數據存儲節點DS_A；所述主數據存儲節點DS_A接收并存儲D_A和D_i。在本方案中，在實現元數據使用糾刪碼(ErasureCoding,EC)保護機制下，主數據存儲節點DS_A備份元數據分條中其他元數據塊D_i，因為只需要將數據存儲節點DS_i上的元數據塊D_i在主數據存儲節點DS_A上備份，相比現有技術中所有元數據塊多副本，不需要校驗塊副本，減少了存儲空間，同時在客戶端訪問元數據時，可以從主數據存儲節點DS_A訪問所有元數據塊，提高了元數據訪問速度。本方案的分布式存儲系統可以為分布式文件系統、分布式對象存儲系統或分布式塊設備存儲。

可選的，所述管理節點根據所述元數據分條的分區視圖為所述元數據分條確定主數據存儲節點DS_A、數據存儲節點DS_i和校驗存儲節點CS_r，具體包括：所述管理節點根據產生所述元數據分條中的元數據的寫請求確定所述元數據分條對應的分區；所述管理節點根據所述元數據分條對應的分區查詢所述元數據分條的分區視圖確定所述主數據存儲節點DS_A、所述數據存儲節點DS_i和所述校驗存儲節點CS_r。

可選的，所述管理節點根據所述寫請求攜帶的地址確定所述元數據分條對應的分區。