[發明專利]數據壓縮方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202011295604.5
• 申請日: 2020-11-18
• 公開（公告）號: CN112269769A
• 公開（公告）日: 2021-01-26
• 發明（設計）人: 劉瑾瑾;趙宏;陳小夢;寧德剛;趙京輝
• 申請（專利權）人: 遠景智能國際私人投資有限公司;上海遠景科創智能科技有限公司
• 主分類號: G06F16/174
• 分類號: G06F16/174;G06F16/16
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 邢少真

本申請是關于一種數據壓縮方法、裝置、計算機設備及存儲介質，具體涉及數據處理領域。方法包括：獲取目標數據；根據第i?1個目標數據段對應的壓縮數據信息，通過參數更新模型對第i?1個目標數據段對應的壓縮參數進行更新，得到第i個目標數據段對應的壓縮參數；參數更新模型是根據歷史壓縮參數以及歷史壓縮參數對應的壓縮數據信息，通過強化學習的方式得到的；根據第i個目標數據段對應的壓縮參數，對第i個目標數據段進行數據壓縮。上述方案，通過人工智能技術，根據歷史壓縮參數以及歷史壓縮參數對應的壓縮信息，更新參數更新模型，并通過更新后的參數更新模型調整壓縮參數，在保證壓縮精度的情況下，提高壓縮效率。

技術領域

本申請涉及數據處理領域，特別涉及一種數據壓縮方法、裝置、計算機設備及存儲介質。

背景技術

隨著物聯網技術的快速發展，物聯網大數據問題開始凸顯，物聯網數據的海量特性給數據質量控制、數據存儲、數據壓縮、數據集成、數據融合、數據查詢帶來極大挑戰，其中，對數據壓縮能力的需求正是物聯網信息化和數字化發展的痛點。

在相關技術中，開發者滿足數據質量控制的前提下，采取合適、高效的壓縮方法，從而最大程度上減少時序數據的冗余存儲，提高空間利用率，可以有效降低存儲成本、提高存儲性能。

然而，相關技術中，開發者在對數據進行壓縮時，采用的壓縮率較大的壓縮參數，可能導致壓縮精度較低，而采用壓縮精度較高的壓縮參數時可能導致壓縮率太低，開發者難以選擇同時保證壓縮率和壓縮精度的壓縮參數。

發明內容

本申請實施例提供了一種數據壓縮方法、裝置、計算機設備及存儲介質，可以調整壓縮參數，在保證壓縮精度的情況下，提高壓縮效率，該技術方案如下：

一方面，提供了一種數據壓縮方法，所述方法包括：

獲取目標數據；所述目標數據包括至少兩個目標數據段；

根據第i-1個所述目標數據段對應的壓縮數據信息，通過參數更新模型對第i-1個所述目標數據段對應的壓縮參數進行更新，得到第i個所述目標數據段對應的壓縮參數；i≥2，且i為整數；所述壓縮數據信息包括壓縮比和壓縮誤差中的至少一種；所述參數更新模型是根據歷史壓縮參數以及所述歷史壓縮參數對應的壓縮數據信息，通過強化學習的方式得到的；所述壓縮參數用于指示對所述目標數據段進行數據壓縮的壓縮精度；所述歷史壓縮參數是歷史目標數據段對應的壓縮參數；

根據第i個所述目標數據段對應的壓縮參數，對第i個所述目標數據段進行數據壓縮。

又一方面，提供了一種數據壓縮裝置，所述裝置包括：

目標數據獲取模塊，用于獲取目標數據；所述目標數據包括至少兩個目標數據段；

壓縮參數更新模塊，用于根據第i-1個所述目標數據段對應的壓縮數據信息，通過參數更新模型對第i-1個所述目標數據段對應的壓縮參數進行更新，得到第i個所述目標數據段對應的壓縮參數；i≥2，且i為整數；所述壓縮數據信息包括壓縮比和壓縮誤差中的至少一種；所述參數更新模型是根據歷史壓縮參數以及所述歷史壓縮參數對應的壓縮數據信息，通過強化學習的方式得到的；所述壓縮參數用于指示對所述目標數據段進行數據壓縮的壓縮精度；所述歷史壓縮參數是歷史目標數據段對應的壓縮參數；

數據壓縮模塊，用于根據第i個所述目標數據段對應的壓縮參數，對第i個所述目標數據段進行數據壓縮。

在一種可能的實現方式中，所述歷史目標數據段包括第i個所述目標數據段之前的所述目標數據段；

所述裝置還包括：