[發明專利]一種數據存儲方法、裝置及系統

有效

• 申請號: 201610825721.5
• 申請日: 2016-09-14
• 公開（公告）號: CN107817947B
• 公開（公告）日: 2021-03-26
• 發明（設計）人: 袁冬
• 申請（專利權）人: 北京金山云網絡技術有限公司;北京金山云科技有限公司
• 主分類號: G06F3/06
• 分類號: G06F3/06
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 馬敬;項京

本發明實施例公開了一種數據存儲方法、裝置及系統，方法包括：接收針對第一數據的存儲指令；并分配用于按照多副本數據存儲規則存儲第一數據的第一數據存儲塊組，將第一數據存儲至第一數據存儲塊組的各個數據存儲塊中；判斷第一數據存儲塊組是否寫滿；如果是，判斷第一數據存儲塊組是否滿足預設的存儲方式轉化條件；若滿足，將任意一個數據存儲塊中存儲的數據存儲至EC數據存儲塊中；刪除第一數據存儲塊組中存儲的所有數據。應用本發明實施例，判斷多副本存儲規則存儲的數據是否滿足預設的存儲方式轉化條件，將滿足存儲方式轉化條件的數據轉存儲至EC數據存儲塊中，并刪除所有多副本存儲規則存儲的數據，節省了存儲空間。

技術領域

本發明涉及計算機領域，特別涉及一種數據存儲方法、裝置及系統。

背景技術

近線存儲(Nearline Storage)又稱低頻訪問存儲，是隨著客戶存儲環境的細化所提出的一個概念，所謂的近線存儲，外延相對較廣泛，主要定位于客戶在線存儲和離線存儲之間的應用。就是指將那些并不是經常用到，或者說數據的訪問量并不大的數據存放在性能較低的存儲設備上。在多數情況下由于不常用數據占總數據量的比重比較大，這也就要求近線存儲設備具有較大的容量。

目前，在近線存儲中為了解決大規模數據的可靠性問題，多按照多副本數據存儲規則對數據進行存儲，即將同樣的數據在多個不同位置的數據存儲塊進行存儲，例如常用的三副本技術，就是將三份同樣的數據存儲在三個不同的數據存儲塊中，這樣即使數據的一個數據副本出現問題，也不會導致該數據出現問題。數據存儲塊為計算機硬盤或存儲區中劃分的用于存儲數據的存儲塊。

然而，通常情況下，存儲的數據在經過一段時間的高頻率訪問后，其訪問率將大幅降低。當訪問頻率降低后，系統對數據存儲的可靠性要求將降低，由于按照多副本數據存儲規則對數據進行存儲，需要將多份同樣的數據在多個不同的數據存儲塊中存儲，占用的存儲空間大；因此在訪問頻率降低的情況下，如果依然按照多副本數據存儲規則進行數據存儲，將帶來較大的存儲空間浪費。

發明內容

本發明實施例的目的在于提供一種數據存儲方法、裝置及系統，以節省存儲空間。

為達到上述目的，本發明實施例公開了一種數據存儲方法，所述方法包括：

接收針對第一數據的存儲指令；

根據所述存儲指令，分配用于按照多副本數據存儲規則存儲所述第一數據的第一數據存儲塊組，將所述第一數據存儲至所述第一數據存儲塊組的各個數據存儲塊中；

判斷所述第一數據存儲塊組是否寫滿；

如果是，判斷所述第一數據存儲塊組是否滿足預設的存儲方式轉化條件；

如果滿足，確定糾刪碼EC數據存儲塊，并按照EC數據存儲規則，將第一數據存儲塊中存儲的數據存儲至所述EC數據存儲塊中，其中，所述第一數據存儲塊為：所述第一數據存儲塊組的任意一個數據存儲塊；

刪除所述第一數據存儲塊組的各個數據存儲塊中存儲的所有數據。

優選的，所述根據所述存儲指令，分配用于按照多副本數據存儲規則存儲所述第一數據的第一數據存儲塊組，將所述第一數據存儲至所述第一數據存儲塊組的各個數據存儲塊中，包括：

根據所述存儲指令，判斷是否存在處于可寫入狀態的數據存儲塊；

如果存在，按照多副本數據存儲規則，根據處于可寫入狀態的數據存儲塊確定用于存儲所述第一數據的第一數據存儲塊組，將所述第一數據存儲至所述第一數據存儲塊組的各個數據存儲塊中；

如果不存在，按照多副本數據存儲規則，創建數據存儲塊，獲得用于存儲所述第一數據的第一數據存儲塊組，將所述第一數據存儲至所述第一數據存儲塊組的各個數據存儲塊中。

優選的，所述判斷是否存在處于可寫入狀態的數據存儲塊，包括：