[發明專利]一種集群下基于數據緩存的糾刪碼歸檔方法

有效

• 申請號: 201510979326.8
• 申請日: 2015-12-23
• 公開（公告）號: CN105610921B
• 公開（公告）日: 2018-09-07
• 發明（設計）人: 黃建忠;曹強;謝長生;蔡穎;代爾衛;夏杰
• 申請（專利權）人: 華中科技大學
• 主分類號: H04L29/08
• 分類號: H04L29/08
• 代理公司: 武漢東喻專利代理事務所(普通合伙) 42224
• 代理人: 黎慧華

1.一種集群下基于數據緩存的糾刪碼歸檔方法，其特征在于，所述糾刪碼歸檔方法具體包括以下步驟：

(1)根據用戶訪問請求，將所需數據分塊從生產節點讀取到節點緩沖區，并將數據分塊發送給訪問節點，同時根據歸檔數據狀態表將所述數據分塊轉發給歸檔節點；

所述根據歸檔數據狀態表將數據分塊轉發給歸檔節點的方法為：

判斷所述數據分塊是否已被轉發到歸檔節點，若是，則將該數據分塊轉發到訪問節點；若否，則將該數據分塊同時轉發到訪問節點和歸檔節點；

(2)歸檔節點根據接收到的數據分塊，更新每個數據節點的數據分塊個數；并判斷歸檔節點是否接收到當前條帶的全部數據分塊，若是，則將當前條帶進行歸檔；若否，則從生產集群讀取冷數據塊，將條帶湊齊之后進行歸檔。

2.如權利要求1所述的糾刪碼歸檔方法，其特征在于，所述步驟(1)中根據用戶訪問請求將所需數據分塊從生產節點讀取到節點緩沖區的方法，包括如下子步驟：

(1.1)訪問節點從管理服務器獲得所需的數據分塊在生產集群中的地址；

(1.2)對所述數據分塊在生成集群中的地址對應節點發出讀請求；

(1.3)將數據分塊從其所在生成集群中的生產節點讀取到節點緩沖區。

3.如權利要求1或2所述的糾刪碼歸檔方法，其特征在于，所述步驟(2)具體包括如下子步驟：

(2.1)歸檔節點接收數據分塊，更新歸檔節點中包含的每個數據節點的數據分塊個數；

(2.2)歸檔節點初始化當前條帶，分析條帶的節點組成，判斷接收的數據塊屬于哪個數據節點，并初始化存儲變量；所述條帶的節點組成包括數據節點和校驗節點；

(2.3)由歸檔節點判斷是否接收到當前條帶的全部數據分塊，若是，進入步驟(2.7)；若否，則進入步驟(2.4)；

(2.4)在時長為T的時間間隔內，歸檔節點從用戶緩存接收數據分塊；

(2.5)判斷當前條帶的k個數據分塊是否集齊，若是，進入步驟(2.7)；若否，則進入步驟(2.6)；其中，k值等于數據節點的個數；

(2.6)歸檔節點從生產集群中直接讀取冷數據，以湊齊μ個條帶，然后進入步驟(2.3)；其中，μ為歸檔節點在時間間隔T內所能歸檔的最大條帶數；

(2.7)歸檔當前條帶，并將條帶號i的值加1，并更新歸檔數據狀態表；

(2.8)根據歸檔數據狀態表判斷是否完成全部條帶的歸檔，若否，則進入步驟(2.3)；若是，則結束歸檔。