[發明專利]一種數據存儲的檢測方法、設備及分布式存儲系統

有效

• 申請號: 201310683911.4
• 申請日: 2013-12-13
• 公開（公告）號: CN103744745B
• 公開（公告）日: 2018-05-29
• 發明（設計）人: 王鋒
• 申請（專利權）人: 北京奇虎科技有限公司;奇智軟件（北京）有限公司
• 主分類號: G06F11/14
• 分類號: G06F11/14;H04L29/08
• 代理公司: 北京元中知識產權代理有限責任公司 11223
• 代理人: 王明霞

1.一種數據存儲的檢測方法，所述方法包括：

對分布式存儲系統中的第一數據節點中存儲的各條數據進行掃描；

對于當前掃描到的數據，獲取所述掃描到的數據存儲在所述分布式存儲系統的其余一個或多個第二數據節點中的副本，并在第一數據節點啟動后，觸發檢測所述數據的各個副本是否發生故障。

2.根據權利要求1所述的方法，其中，對分布式存儲系統中的第一數據節點中存儲的各條數據進行掃描的步驟包括：

對記錄所述第一數據節點中寫入的每條數據的相關信息進行掃描，獲取每條所述數據的相關信息，其中，所述相關信息包括：所述數據的數據標識、及存儲所述數據的其余一個或多個副本的第二數據節點的標識信息。

3.根據權利要求1所述的方法，其中，獲取所述掃描到的數據存儲在所述分布式存儲系統的其余一個或多個第二數據節點中的副本，并檢測所述數據的各個副本是否發生故障的步驟包括：

獲取所述第一數據節點中存儲的所述數據，并獲取所述數據的第一數據簽名；

從存儲所述數據的副本的其余所述一個或多個第二數據節點上分別讀取所述數據的各個副本；

分別獲取讀取的各個所述副本的第二數據簽名；

通過判斷獲取的所述第一數據簽名和各個所述第二數據簽名是否完全相同，檢測所述數據的各個副本是否發生故障。

4.根據權利要求1-3中任一項所述的方法，其中，如果檢測到所述數據的一個或多個副本發生故障，所述方法還包括：

將所述數據重新寫入到存儲發生故障的副本的數據節點。

5.根據權利要求1-3中任一項所述的方法，其中，所述方法還包括：

所述分布式存儲系統中的一個接入節點接收到數據寫入請求；

所述接入節點向所述分布式存儲系統的N個數據節點發送副本寫入請求，其中，N為大于1的整數；

在第一預定時間內，所述接入節點接收到所述N個數據節點中的n個數據節點返回的成功應答，確定所述請求寫入的數據能夠成功寫入，等待所述N個數據節點中其余N-n個數據節點的成功應答，其中，n為大于0且小于N的整數；

在第二預定時間內，如果所述接入節點全部接收到所述N-n個數據節點返回的成功應答，則確定所述請求寫入的數據的副本完整，否則，確定所述請求寫入的數據的副本不完整，對所述請求寫入的數據的副本進行修復。

6.一種數據存儲的檢測設備，所述設備包括：

掃描模塊，用于對分布式存儲系統中的第一數據節點中存儲的各條數據進行掃描；

檢測模塊，用于對所述掃描模塊當前掃描到的數據進行檢測，獲取掃描到的所述數據存儲在所述分布式存儲系統的其余一個或多個第二數據節點中的各個副本，并在第一數據節點啟動后，觸發檢測所述數據的各個副本是否發生故障。

7.根據權利要求6所述的設備，所述檢測模塊包括：

讀取模塊，用于獲取所述第一數據節點中存儲的所述數據，以及從存儲所述數據的副本的其余一個或多個第二數據節點上分別讀取所述數據的各個副本；

獲取模塊，用于分別獲取所述第一數據節點中存儲的所述數據的第一數據簽名，以及讀取的各個所述副本的第二數據簽名；

判斷模塊，用于判斷獲取的所述第一數據簽名和各個所述第二數據簽名是否完全相同，檢測所述數據的各個副本是否發生故障。

8.根據權利要求6或7所述的設備，所述設備還包括：

寫入模塊，用于在所述檢測模塊檢測到其中一個或多個副本發生故障時，將所述數據重新寫入到存儲發生故障的副本的數據節點。

9.一種分布式存儲系統，其中，包括如權利要求6-8任一項所述的數據存儲的檢測設備。

10.根據權利要求9所述的系統，其中，所述系統還包括：接入節點，所述接入節點包括：

第一接收模塊，用于接收數據寫入請求；

發送模塊，用于所述分布式存儲系統的N個數據節點發送副本寫入請求，其中，N為大于1的整數；

第二接收模塊，用于接收所述N個數據節點返回的成功應答；

確定模塊，用于在所述第二接收模塊在第一預定時間內接收到所述N個數據節點中的n個數據節點返回的成功應答時，確定所述請求寫入的數據能夠成功寫入，以及如果所述第二接收模塊在第二預定時間內全部接收到所述N個數據節點中的其余N-n個數據節點返回的成功應答，則確定所述請求寫入的數據的副本完整，否則，確定所述請求寫入的數據的副本不完整，對所述請求寫入的數據的副本進行修復。