[發明專利]分布式數據存儲方法和裝置

有效

• 申請號: 201610966877.5
• 申請日: 2016-10-28
• 公開（公告）號: CN108021585B
• 公開（公告）日: 2022-01-18
• 發明（設計）人: 鄭斌
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F16/21
• 分類號: G06F16/21
• 代理公司: 廣州華進聯合專利商標代理有限公司 44224
• 代理人: 何平;鄧云鵬

1.一種分布式數據存儲方法，其特征在于，包括：

獲取存儲的數據的上一次處理時間；

根據所述數據的上一次處理時間確定所述數據是否達到預設的數據向下遷移條件；

若是，將所述數據發送至下一級存儲系統，由下一級存儲系統存儲；

接收所述下一級存儲系統發送的第一刪除指令；所述第一刪除指令攜帶有所述數據的主鍵；

根據所述第一刪除指令，判斷遷移前的數據和遷移后的數據是否一致；

若不一致，則向所述下一級存儲系統發送第二刪除指令，所述第二刪除指令攜帶有所述數據的主鍵，由所述下一級存儲系統根據所述第二刪除指令，刪除所述主鍵對應的數據；

若一致，則根據所述第一刪除指令，刪除所述主鍵對應的數據。

2.根據權利要求1所述的方法，其特征在于，所述方法還包括：

接收上一級存儲系統發送的處理請求，所述處理請求攜帶有所述數據的主鍵；所述處理請求包括數據讀寫和數據更新的任意一種；

當存儲有所述主鍵對應的數據時，根據所述處理請求，對所述數據進行處理，并記錄所述數據的處理時間；

根據記錄的所述數據的處理時間確定所述數據是否達到預設的數據向上遷移條件；

若是，將所述數據發送至所述上一級存儲系統存儲。

3.根據權利要求1所述的方法，其特征在于：

在所述將所述數據發送至下一級存儲系統，由下一級存儲系統存儲的步驟之前，還包括：計算所述數據遷移前的摘要；

所述根據所述第一刪除指令，判斷遷移前的數據和遷移后的數據是否一致的步驟包括：根據所述第一刪除指令，計算所述主鍵對應的數據遷移后的摘要；判斷所述數據的遷移前的摘要和遷移后的摘要是否一致。

4.根據權利要求1所述的方法，其特征在于，所述預設的數據向下遷移條件包括：所述數據的上一次處理時間與當前時間的時間差超過預設值。

5.根據權利要求1所述的方法，其特征在于，還包括：

接收所述下一級存儲系統發送的升熱請求，所述升熱請求攜帶有所述數據的主鍵；

根據所述升熱請求，將所述數據的主鍵加鎖；

向所述下一級存儲系統發送數據遷移請求，所述數據遷移請求攜帶有所述數據的主鍵；

接收并存儲所述下一級存儲系統根據所述數據遷移請求發送的與所述主鍵對應的數據，并將所述數據的主鍵解鎖；

向所述下一級存儲系統發送第三刪除指令；所述第三刪除指令攜帶有所述數據的主鍵，由所述下一級存儲系統根據所述第三刪除指令，刪除所述主鍵對應的所述數據。

6.根據權利要求5所述的方法，其特征在于，還包括：

接收請求端或上一級存儲系統發送的處理請求；所述處理請求攜帶有所述數據的主鍵；所述處理請求包括數據讀寫請求和數據更新請求的任意一種；

當未存儲有與所述主鍵對應的數據時，判斷所述數據的主鍵是否加鎖；

若是，則將所述處理請求加入到待處理隊列，并返回所述判斷所述數據的主鍵是否加鎖的步驟；

若否，則將所述處理請求發送至所述下一級存儲系統。

7.根據權利要求2所述的方法，其特征在于，還包括：

接收請求端或上一級存儲系統發送的新增數據請求，并將所述新增數據請求發送至下一級存儲系統，在下一級存儲系統為最后一級存儲系統時，由所述下一級存儲系統根據所述新增數據請求，對所述數據進行寫入處理生成對應的主鍵并保存。