[發明專利]數據塊在存儲設備中存儲方法和存儲設備

有效

• 申請號: 201410526254.7
• 申請日: 2014-09-30
• 公開（公告）號: CN104298614B
• 公開（公告）日: 2017-08-11
• 發明（設計）人: 李育國
• 申請（專利權）人: 華為技術有限公司
• 主分類號: G06F12/02
• 分類號: G06F12/02;G06F3/06;G06F17/30
• 代理公司: 北京同立鈞成知識產權代理有限公司11205
• 代理人: 劉芳

技術領域

本發明實施例涉及數據存儲技術，尤其涉及一種數據塊在存儲設備中存儲方法和存儲設備。

背景技術

隨著信息時代的不斷發展，網絡中的數據也在急速增長，存儲海量數據的同時也隨之帶來了能源消耗高的問題。重復數據刪除技術可以有效的刪除數據中的重復部分以減少存儲所需空間，多份相同的數據之間會互相引用，由于哈希計算的隨機性，為了讀取一份數據可能會涉及到磁盤的全面尋址。

在現有的重復數據刪除技術中，將數據被分為多個數據塊(Chunk)，在存儲時不考慮數據塊的引用關系，對各個數據塊進行哈希計算得到各個數據塊的哈希值后將各個數據塊隨機存儲在不同的磁盤或磁帶當中，即一份數據的多個數據塊存儲在較多不同的磁盤或磁帶當中，因此，在讀取該份數據時，需要對較多的磁盤或磁帶上電，導致能源消耗過大。

發明內容

本發明實施例提供的數據塊在存儲設備中存儲方法和存儲設備，可以在讀取數據時減少讀取時需要調用的磁盤，從而可以降低能源消耗。

第一方面，本發明實施例提供一種數據塊在存儲設備中存儲方法，所述存儲設備用于將第一數據進行重復數據刪除獲得第一重復數據刪除集合；所述存儲設備用于將第二數據進行重復數據刪除獲得第二重復數據刪除集合；所述第一重復數據刪除集合包含所述第一數據在所述存儲設備中存儲的唯一數據塊；所述第二重復數據刪除集合包括所述第二數據在所述存儲設備中存儲的唯一數據塊和指針；所述指針用于引用所述第一重復數據刪除集合中的第一數據塊；其中，所述第一數據塊是所述第二數據的組成部分，并且所述第一數據塊與所述第二數據在所述存儲設備中存儲的唯一數據塊不同；所述方法包括：

判斷所述第一數據塊的被引用數量；

當所述被引用數量超過第一閾值時，將所述第一數據塊遷移到第三重復數據刪除集合中。

結合第一方面，在第一種可能的實現方式中，所述第一重復數據刪除集合存儲在所述存儲設備的第一硬盤中；所述第二重復數據刪除集合存儲在所述存儲設備的第二硬盤中；所述第三重復數據刪除集合存儲在所述存儲設備的第三硬盤中。

結合第一方面的第一種可能的實現方式，在第二種可能的實現方式中，所述第三硬盤的數據訪問速度大于所述第一硬盤的數據訪問數度。

結合第一方面的第一種可能的實現方式，在第三種可能的實現方式中，當所述第一重復數據刪除集合的數據塊的被引用數量均為1時，關閉所述第一硬盤電源。

第二方面，本發明實施例提供一種存儲設備，所述存儲設備用于將第一數據進行重復數據刪除獲得第一重復數據刪除集合；所述存儲設備用于將第二數據進行重復數據刪除獲得第二重復數據刪除集合；所述第一重復數據刪除集合包含所述第一數據在所述存儲設備中存儲的唯一數據塊；所述第二重復數據刪除集合包括所述第二數據在所述存儲設備中存儲的唯一數據塊和指針；所述指針用于引用所述第一重復數據刪除集合中的第一數據塊；其中，所述第一數據塊是所述第二數據的組成部分，并且所述第一數據塊與所述第二數據在所述存儲設備中存儲的唯一數據塊不同；所述設備包括：

判斷單元，用于判斷所述第一數據塊的被引用數量；

處理單元，用于當所述被引用數量超過第一閾值時，將所述第一數據塊遷移到第三重復數據刪除集合中。

結合第二方面，在第一種可能的實現方式中，所述處理單元還用于：將所述第一重復數據刪除集合存儲在所述存儲設備的第一硬盤中；將所述第二重復數據刪除集合存儲在所述存儲設備的第二硬盤中；將所述第三重復數據刪除集合存儲在所述存儲設備的第三硬盤中。

結合第二方面的第一種可能的實現方式，在第二種可能的實現方式中，所述第三硬盤的數據訪問速度大于所述第一硬盤的數據訪問數度。

結合第二方面的第一種可能的實現方式，在第三種可能的實現方式中，所述處理單元還用于：當所述第一重復數據刪除集合的數據塊的被引用數量均為1時，關閉所述第一硬盤電源。