[發明專利]一種數據壓縮方法、裝置、電子設備及存儲介質

有效

• 申請號: 202210107052.3
• 申請日: 2022-01-28
• 公開（公告）號: CN114449052B
• 公開（公告）日: 2023-08-29
• 發明（設計）人: 張立鵬;趙程程
• 申請（專利權）人: 蘇州浪潮智能科技有限公司
• 主分類號: H04L69/04
• 分類號: H04L69/04;H04L69/22;H04L67/1097;H04L9/40
• 代理公司: 北京三聚陽光知識產權代理有限公司 11250
• 代理人: 王月

本申請公開了一種數據壓縮方法、裝置、電子設備及存儲介質。該方法包括：獲取來自于業務終端的原始業務數據，其中，所述業務終端是與所述云服務系統具有連接關系的終端；調用數據壓縮插件對所述原始業務數據進行壓縮，得到壓縮后的目標業務數據；確定所述目標業務數據待寫入的目標插件，其中，所述目標插件為部署在所述云服務系統中的插件；將所述目標業務數據寫入所述目標插件。本申請實施例提供的壓縮方法能夠在數據存儲前調用數據壓縮插件對業務數據進行壓縮，能夠降低后端的業務壓力，且保證后端的服務效率，以及數據的實時使用。

技術領域

本申請涉及數據處理領域，尤其涉及一種數據壓縮方法、裝置、電子設備及存儲介質。

背景技術

隨著Open?stack集群規模越來越大，監控數據、業務數據呈現指數級增長，給后期計算、存儲資源擴容帶來了極大的考驗。如何穩定、永久存儲監控數據和業務數據，快速查詢熱數據與歷史數據一直是大規模云計算集群存在的問題。

目前對業務數據的壓縮處理均是在后端進行，依靠分布式、集中式的存儲實現數據存儲功能，然而面臨業務數據的存儲量增大時，后端會對存儲的數據進行壓縮，導致后端的服務效率降低，無法保證數據的實時使用。

發明內容

為了解決上述技術問題或者至少部分地解決上述技術問題，本申請提供了一種數據壓縮方法、裝置、電子設備及存儲介質。

根據本申請實施例的一個方面，提供了一種數據壓縮方法，應用于云服務系統，所述方法包括：

獲取來自于業務終端的原始業務數據，其中，所述業務終端是所述云服務系統具有連接關系的終端；

調用數據壓縮插件對所述原始業務數據進行壓縮，得到壓縮后的目標業務數據；

確定所述目標業務數據待寫入的目標插件，其中，所述目標插件為部署在所述云服務系統中的插件；

將所述目標業務數據寫入所述目標插件。

進一步的，在獲取來自于業務終端的原始業務數據之前，所述方法還包括：

接收插件使用請求，其中，所述插件使用請求用于請求使用數據壓縮插件；

解析所述插件使用請求，得到插件認證信息；

在確定所述插件認證信息認證通過的情況下，激活部署于所述云服務系統中的數據壓縮插件。

進一步的，所述獲取來自于業務終端的原始業務數據，包括：

獲取作用于所述數據壓縮插件的配置操作；

基于所述配置操作，將所述數據壓縮插件對外提供的服務接口與所述業務終端對接，并基于所述服務接口獲取來自于業務終端的原始業務數據。

進一步的，所述調用數據壓縮插件對所述原始業務數據進行壓縮，得到壓縮后的目標業務數據，包括：

調用所述數據壓縮插件解析所述原始業務數據，得到所述原始業務數據對應的數據類型；

根據所述數據類型對應的壓縮操作對所述原始業務數據進行壓縮，得到壓縮后的目標業務數據。

進一步的，所述根據所述數據類型對應的壓縮操作對所述原始業務數據進行壓縮，得到壓縮后的目標業務數據，包括：

在所述數據類型用于指示所述原始業務數據屬于非實時使用類型的情況下，對所述原始業務數據進行切分，得到多個不同數據長度的原始子數據；

對多個不同長度的原始子數據進行壓縮，得到多個相同數據長度的目標子數據；

基于所述目標子數據生成的壓縮后的目標業務數據。

進一步的，所述方法還包括：