[發明專利]離線壓縮方法、裝置、計算機設備及存儲介質

在審

• 申請號: 201910320212.0
• 申請日: 2019-04-19
• 公開（公告）號: CN110162561A
• 公開（公告）日: 2019-08-23
• 發明（設計）人: 龔紅斌
• 申請（專利權）人: 平安科技（深圳）有限公司
• 主分類號: G06F16/25
• 分類號: G06F16/25;G06F16/2453
• 代理公司: 深圳眾鼎專利商標代理事務所(普通合伙) 44325
• 代理人: 黃章輝

本發明公開了一種離線壓縮方法、裝置、計算機設備及存儲介質。該方法包括：通過數據接口獲取待壓縮數據列表，基于待壓縮數據列表依序獲取待壓縮數據；將待壓縮數據通過鎖定接口發送給對應的鎖定函數，獲取鎖定函數處理后的鎖定壓縮數據；對鎖定壓縮數據進行壓縮，獲取壓縮后的鎖定壓縮數據；調用存儲接口將壓縮后的鎖定壓縮數據保存在硬盤上；調用解鎖接口對壓縮后的鎖定壓縮數據進行解鎖，并通過調用空間回收接口釋放鎖定壓縮數據壓縮前的空間，既可以實現對待壓縮數據進行壓縮，也不會對業務訪問增加負擔，保證正常的業務訪問速度和訪問效率。

技術領域

本發明涉及計算機開發領域，尤其涉及一種離線壓縮方法、裝置、計算機設備及存儲介質。

背景技術

現有ceph提供了在線壓縮功能，但沒有離線壓縮功能。對數據進行壓縮可以有效節省存儲空間，降低企業硬件成本，但對數據進行壓縮會損耗cpu資源，如果壓縮進程繁忙，勢必影響應用系統對存儲的訪問效率；另外，讀取壓縮數據的時候需要先解壓再返回未壓縮數據到客戶端，這樣會影響客戶對壓縮數據的訪問速度，增加訪問延時。由于壓縮比較耗時，在線壓縮會增加時延，使得數據訪問變得緩慢，影響數據交互的效率。

發明內容

本發明實施例提供一種離線壓縮方法、裝置、計算機設備及存儲介質，以解決在線壓縮影響數據訪問效率的問題。

一種離線壓縮方法，包括：

通過數據接口獲取待壓縮數據列表，基于待壓縮數據列表依序獲取待壓縮數據；

將所述待壓縮數據通過鎖定接口發送給對應的鎖定函數，獲取鎖定函數處理后的鎖定壓縮數據；

對所述鎖定壓縮數據進行壓縮，獲取壓縮后的鎖定壓縮數據；

調用存儲接口將所述壓縮后的鎖定壓縮數據保存在硬盤上；

調用解鎖接口對所述壓縮后的鎖定壓縮數據進行解鎖，并通過調用空間回收接口釋放所述鎖定壓縮數據壓縮前的空間。

一種離線壓縮裝置，包括：

數據獲取模塊，用于通過數據接口獲取待壓縮數據列表，基于待壓縮數據列表依序獲取待壓縮數據；

數據鎖定模塊，用于將所述待壓縮數據通過鎖定接口發送給對應的鎖定函數，獲取鎖定函數處理后的鎖定壓縮數據；

數據壓縮模塊，用于對所述鎖定壓縮數據進行壓縮，獲取壓縮后的鎖定壓縮數據；

數據存儲模塊，用于調用存儲接口將所述壓縮后的鎖定壓縮數據保存在硬盤上；

數據解鎖和空間回收模塊，用于調用解鎖接口對所述壓縮后的鎖定壓縮數據進行解鎖，并通過調用空間回收接口釋放所述鎖定壓縮數據壓縮前的空間。

一種計算機設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，所述處理器執行所述計算機程序時實現上述離線壓縮方法。

一種計算機可讀存儲介質，所述計算機可讀存儲介質存儲有計算機程序，所述計算機程序被處理器執行時實現上述離線壓縮方法。

上述離線壓縮方法、裝置、計算機設備及存儲介質，離線壓縮器通過獲取待壓縮數據列表，使得離線壓縮器按照待壓縮數據列表中存儲的待壓縮數據的順序，依序對待壓縮數據進行壓縮。在獲取待壓縮數據后，離線壓縮離線壓縮器會通過鎖定接口將待壓縮數據鎖定，以保證待壓縮數據可以進行順利壓縮。然后確定壓縮線程數、壓縮起始時間、壓縮暫停時間和壓縮粒度，完成對待壓縮數據的壓縮。當待壓縮數據完成壓縮后，離線壓縮器將待壓縮數據保存在硬盤上，并對完成壓縮的該待壓縮數據進行解鎖，以方便后續使用。使用離線壓縮器對待壓縮數據進行壓縮，既可以實現對待壓縮數據進行壓縮，也不會對業務訪問增加負擔，保證正常的業務訪問速度和訪問效率。

附圖說明