[發明專利]數據壓縮方法、裝置及計算機可讀存儲介質

在審

• 申請號: 202011033892.7
• 申請日: 2020-09-27
• 公開（公告）號: CN111984610A
• 公開（公告）日: 2020-11-24
• 發明（設計）人: 王艷清;徐洪志;亓國強;郭平加
• 申請（專利權）人: 蘇州浪潮智能科技有限公司
• 主分類號: G06F16/174
• 分類號: G06F16/174;G06F3/06
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 劉新雷

本申請公開了一種數據壓縮方法、裝置及計算機可讀存儲介質。其中，方法包括當接收到主機下發的寫請求，判斷寫請求對應待處理數據的占用空間容量值與預設最小決策采樣閾值間的數值關系，若待處理數據的占用空間容量值不大于預設最小決策采樣閾值，或待處理數據的占用空間容量值大于預設最小決策采樣閾值但其壓縮率低于預設最大壓縮率閾值，對待處理數據進行壓縮，同時將待處理數據的元數據對應字段標識為壓縮數據。若待處理數據的壓縮率不低于預設最大壓縮率閾值，不對待處理數據進行壓縮處理，將待處理數據的元數據對應字段標記為原始數據。本申請通過數據壓縮可以更加高效地實現數據縮減，提高存儲系統的數據處理效率，提升存儲系統的存儲性能。

技術領域

本申請涉及存儲技術領域，特別是涉及一種數據壓縮方法、裝置及計算機可讀存儲介質。

背景技術

伴隨著信息產業化的快速發展，信息數據增速明顯，需要存儲的數據規模越來越大，用戶對存儲設備的容量提出了更高的要求，存儲設備的容量與成本在一定范圍內成正比，更大容量的存儲設備相應的價格也就越高，生產成本的攀升顯然對用戶不友好，數據縮減便成為提升存儲設備的存儲性能的一項應用廣泛的技術，數據壓縮是實現數據縮減的一種實施方式，但是由于壓縮需要消耗較多的系統資源與時間，因此如何提高數據的壓縮效率具有重要的價值。

壓縮效率(Compression rate，壓縮率)為用于描述壓縮文件的效果名，是文件壓縮后的大小與壓縮前的大小之比，例如100M的文件壓縮后是90M，壓縮率為90/100*100％＝90％，壓縮率一般是越小越好，但是壓得越小，解壓時間越長。相關存儲系統中，在創建一個壓縮卷后或者開啟壓縮功能后，當主機發送寫請求時，IO(Input/Output，輸入/輸出)將會被存儲的壓縮引擎壓縮，主機發送讀請求，IO數據將會被壓縮引擎解壓縮。當遇到壓縮率較高的數據時，數據壓縮并不能帶來很明顯地數據縮減效果，反而增加了時間延遲、降低了存儲的處理效率。

鑒于此，如何通過數據壓縮更加高效地實現數據縮減，且不影響存儲系統性能，是所屬領域技術人員需要解決的技術問題。

發明內容

本申請提供了一種數據壓縮方法、裝置及計算機可讀存儲介質，通過數據壓縮可以更加高效地實現數據縮減，提高存儲系統的數據處理效率，提升存儲系統的存儲性能。

為解決上述技術問題，本發明實施例提供以下技術方案：

本發明實施例一方面提供了一種數據壓縮方法，包括：

當接收到主機下發的寫請求，若所述寫請求對應待處理數據的占用空間容量值大于預設最小決策采樣閾值，計算所述待處理數據的壓縮率；

若所述待處理數據的壓縮率低于預設最大壓縮率閾值，對所述待處理數據進行壓縮，同時將所述待處理數據的元數據對應字段標識為壓縮數據；若所述待處理數據的壓縮率不低于預設最大壓縮率閾值，將所述待處理數據的元數據對應字段標記為原始數據；

若所述待處理數據的占用空間容量值不大于預設最小決策采樣閾值，對所述待處理數據進行壓縮，同時將所述待處理數據的元數據對應字段標識為壓縮數據。

可選的，所述待處理數據的占用空間容量值不大于預設最小決策采樣閾值，對所述待處理數據進行壓縮包括：

預先分配包括多個待壓縮數據區和壓縮數據區的緩存區，各待壓縮數據區的占用空間容量值等于所述預設最小決策采樣閾值；

若所述待處理數據的占用空間容量值不大于預設緩存閾值，將所述待處理數據存儲至其中一個待壓縮數據區；所述預設緩存閾值小于所述待壓縮數據區的占用空間容量值；若所述待處理數據的占用空間容量值大于預設緩存閾值且小于所述預設最小決策采樣閾值，將所述待處理數據存儲至所述壓縮數據區；

若檢測到各待壓縮數據區中的剩余空間容量值低于容量閾值，同時調用多個壓縮線程對各待處理數據進行壓縮，同時將各待處理數據的元數據對應字段標識壓縮數據；