[發明專利]多副本數據的一致性檢測方法和裝置以及電子設備有效
| 申請號: | 201710536471.8 | 申請日: | 2017-07-04 |
| 公開(公告)號: | CN109213431B | 公開(公告)日: | 2022-05-13 |
| 發明(設計)人: | 石超 | 申請(專利權)人: | 阿里巴巴集團控股有限公司 |
| 主分類號: | G06F3/06 | 分類號: | G06F3/06 |
| 代理公司: | 北京市惠誠律師事務所 11353 | 代理人: | 逯博 |
| 地址: | 英屬開曼群島大開*** | 國省代碼: | 暫無信息 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 副本 數據 一致性 檢測 方法 裝置 以及 電子設備 | ||
本發明實施例提供了一種多副本數據的一致性檢測方法和裝置以及電子設備。該方法包括:將待檢測副本數據切分為數個數據片段,所述數據片段組成待檢測集合;針對所述待檢測集合中的每一個所述數據片段,向多臺存儲服務器發送校驗碼獲取請求,將多臺所述存儲服務器返回的所述校驗碼進行比較,當多臺所述存儲服務器返回的所述校驗碼相同時,刪除所述待檢測集合中相應的所述數據片段;當所述待檢測集合為空時,判定所述待檢測副本數據一致。本發明實施例通過對待檢測副本數據進行切分,分段對數據進行校驗碼比較,對于動態變化的副本數據,降低了一致性檢測的誤報率,實現了多副本數據一致性的快速檢測,極大地提高了系統性能。
技術領域
本發明涉及計算機技術領域,尤其涉及一種多副本數據的一致性檢測方法和裝置以及電子設備。
背景技術
在分布式存儲系統中,用戶寫入的數據一般以多副本方式冗余地存儲于多臺服務器中。一份用戶數據在多臺存儲服務器上的副本應該完全相同,即,多副本數據一致。通常以下幾種情況可能會導致兩個或兩個以上的副本數據不一致:
1、存儲服務器磁盤或內存故障。例如,發生位翻轉或機器掉電,從而造成最近寫入的數據丟失;
2、數據在網絡傳輸過程中發生了損壞;
3、軟件BUG。例如,在用戶寫入數據的過程中,一個存儲服務器未響應,分布式存儲系統卻沒有正確地將這臺存儲服務器排除在外。
為了檢測多副本數據是否一致,一般采用控制服務器來控制各存儲服務器,由存儲服務器計算各自存儲的副本數據的校驗碼,并返回給控制服務器??刂品掌魇占鱾€副本數據的校驗碼,進行比較,以判定多副本數據是否一致。
發明人在實現本發明的過程中,發現現有技術至少存在如下問題:現有的多副本數據一致性檢測方法僅適應于只讀數據的檢測。如果用戶持續地更新數據(即,數據是動態變化的),則,由于數據在網絡上的傳輸延遲,可能存在某些時刻,多個副本存在短時間內的不一致情況(部分副本數據還未更新),此時若進行校驗碼比較,則會得出不一致的結論,從而導致誤報。
發明內容
本發明實施例提供一種多副本數據的一致性檢測方法和裝置以及電子設備,以降低一致性檢測的誤報率,提高系統性能。
為達到上述目的,本發明實施例提供了一種多副本數據的一致性檢測方法,包括:控制服務器將待檢測副本數據切分為數個數據片段,所述數據片段組成待檢測集合;針對所述待檢測集合中的每一個所述數據片段,向多臺存儲服務器發送校驗碼獲取請求;所述存儲服務器根據所述校驗碼獲取請求,向所述控制服務器返回所述數據片段的校驗碼;所述控制服務器將多臺所述存儲服務器返回的所述校驗碼進行比較,當多臺所述存儲服務器返回的所述校驗碼相同時,刪除所述待檢測集合中相應的所述數據片段;當所述待檢測集合為空時,判定所述待檢測副本數據一致。
本發明實施例還提供了一種多副本數據的一致性檢測方法,包括:控制服務器將待檢測副本數據切分為數個數據片段,所述數據片段組成待檢測集合;針對所述待檢測集合中的每一個所述數據片段,向存儲服務器發送校驗碼獲取請求;所述存儲服務器根據所述校驗碼獲取請求,向所述控制服務器返回所述數據片段的校驗碼;所述控制服務器將所述存儲服務器返回的所述校驗碼與存儲于所述控制服務器中的校驗碼進行比較,當所述存儲服務器返回的所述校驗碼與所述控制服務器中的校驗碼相同時,刪除所述待檢測集合中相應的所述數據片段;當所述待檢測集合為空時,判定所述待檢測副本數據一致。
本發明實施例還提供了一種多副本數據的一致性檢測方法,包括:控制服務器針對待檢副本數據,向多臺存儲服務器發送校驗碼獲取請求;所述存儲服務器根據所述校驗碼獲取請求,向所述控制服務器返回所述待檢測副本數據的校驗碼;所述控制服務器將多臺所述存儲服務器返回的所述校驗碼進行比較,當多臺所述存儲服務器返回的所述校驗碼相同時,判定所述待檢測副本數據一致。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于阿里巴巴集團控股有限公司,未經阿里巴巴集團控股有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710536471.8/2.html,轉載請聲明來源鉆瓜專利網。
- 上一篇:存儲管理方法和系統
- 下一篇:利用日志結構合并樹將數據寫入的存儲設備及其方法
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





