[發明專利]一種數據壓縮存儲方法以及數據壓縮存儲裝置

在審

• 申請號: 201711455790.2
• 申請日: 2017-12-28
• 公開（公告）號: CN108304472A
• 公開（公告）日: 2018-07-20
• 發明（設計）人: 何東杰
• 申請（專利權）人: 中國銀聯股份有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06F17/27
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 臧霽晨;楊美靈

1.一種數據壓縮存儲方法，其特征在于，包括下述步驟：

切分步驟，將原始數據切分成多個字段；以及

壓縮步驟，基于數據內容的不同，對于不同字段采用不同的壓縮策略進行壓縮并存儲壓縮后的壓縮數據。

2.如權利要求1所述的數據壓縮存儲方法，其特征在于，

在所述壓縮步驟中，判斷字段之間的關聯關系強弱，根據關聯關系強弱，設定壓縮策略。

3.如權利要求1所述的數據壓縮存儲方法，其特征在于，

所述壓縮步驟包括下述子步驟：

對切成多個字段的數據進行內容分析，建立字段之間的關聯關系；以及

針對單個字段，對于不同的數據內容采用不同的壓縮策略進行壓縮存儲。

4.如權利要求1所述的數據壓縮存儲方法，其特征在于，所述壓縮步驟包括下述子步驟：

對切成多個字段的數據進行內容分析，建立數據分布圖以及字段之間的關聯關系圖，基于數據分布圖以及關聯關系圖識別數據字段之間的相關關系；以及

將存在相關關系的多個字段進行組合，針對組合后的字段，對于不同的數據內容采用不同的壓縮策略進行壓縮存儲。

5.如權利要求1所述的數據壓縮存儲方法，其特征在于，所述壓縮步驟包括下述子步驟：

對切成多個字段的數據進行內容分析，建立數據分布圖以及字段之間的關聯關系圖，基于數據分布圖以及關聯關系圖識別數據字段之間的相關關系；以及

針對單個字段，對于不同的數據內容采用不同的壓縮策略進行壓縮存儲，并且，另一方面，也將存在相關關系的多個字段進行組合，針對組合后的字段，對于不同的數據內容采用不同的壓縮策略進行壓縮存儲。

6.如權利要求3所述的數據壓縮存儲方法，其特征在于，

作為壓縮策略，對于枚舉型字符串字段使用二進制進行壓縮存儲、對于字符串數值轉換為整數或者浮點進行壓縮存儲。

7.如權利要求4所述的數據壓縮存儲方法，其特征在于，

作為壓縮策略，將短字段進行組合后再進行壓縮存儲、將近似字段壓縮冗余信息后進行壓縮存儲、對于字段之間信息逆序的僅存儲其中一個、對于字段之間存在包含關系的壓縮冗余信息后存儲。

8.如權利要求5所述的數據壓縮存儲方法，其特征在于，

作為壓縮策略，對于枚舉型字符串字段使用二進制進行壓縮存儲、將字符串數值轉換為整數或者浮點進行壓縮存儲、將短字段進行組合后再進行壓縮存儲、將近似字段壓縮冗余信息后進行壓縮存儲、對于字段之間信息逆序的僅存儲其中一個、對于字段之間存在包含關系的壓縮冗余信息后存儲。

9.如權利要求1~8任意一項所述的數據壓縮存儲方法，其特征在于，進一步具備：

映射關系存儲步驟，建立所述原始數據與所述壓縮數據之間的映射關系并存儲。

10.一種數據壓縮存儲裝置，其特征在于，具備：

切分模塊，用于將原始數據切分成多個字段；以及

壓縮模塊，用于基于數據內容的不同，對于不同字段采用不同的壓縮策略進行壓縮并存儲壓縮后的壓縮數據。

11.如權利要求10所述的數據壓縮存儲裝置，其特征在于，

所述壓縮模塊判斷字段之間的關聯關系強弱，根據關聯關系強弱，設定壓縮策略。

12.如權利要求10所述的數據壓縮存儲裝置，其特征在于，進一步具備：

映射關系存儲模塊，用于建立所述原始數據與所述壓縮數據之間的映射關系并存儲。