[發明專利]一種數據處理過程中優化壓縮存儲格式的方法

在審

• 申請號: 202010547403.3
• 申請日: 2020-06-16
• 公開（公告）號: CN111858391A
• 公開（公告）日: 2020-10-30
• 發明（設計）人: 胡樹正;湯劍;張瑞峰;周偉;吳正禮;廉淙*;張為民;楊海林;王衛剛;肖從云;惠懷海
• 申請（專利權）人: 中國人民解放軍空軍研究院航空兵研究所;西安中淵凱新信息科技有限公司
• 主分類號: G06F12/02
• 分類號: G06F12/02;G06F16/174;G06F16/951;G06F16/9537
• 代理公司: 北京慧泉知識產權代理有限公司 11232
• 代理人: 王順榮;李娜

1.一種數據處理過程中優化壓縮存儲格式的方法，其特征在于：該方法包括如下步驟：

步驟1：數據整理

將不同機型的數據格式主要分為地址區、參數字典區、數據區；

此外，不同數據包之間共享時間序列，對于來自同一總線或不同總線的不同數據包設置同一時間序列；

步驟2：數據壓縮，對數據采用差分編碼技術再使用ZLIB進行壓縮

首先，采用差分編碼技術對數據序列進行壓縮：先確定編碼序列的第一個值即第一個樣本，然后從第二個樣本開始，再對該樣本與上一樣本之差依次進行編碼；即所述的壓縮方法是對相鄰樣本之間的差值進行編碼，而不是對實際樣本進行編碼；

其次，進一步使用ZLIB進行壓縮：先將數據字節中的重復串替換成距離，長度數組對，距離是在輸入流中向后多少字節可以匹配到數據，長度說明了匹配的數據長度；再對替換后的數據計算各符號出現的概率，根據概率從小到大，由下到上反向構建構造碼樹，依據造碼樹對替換后的數據生成最終編碼。

2.根據權利要求1所述的一種數據處理過程中優化壓縮存儲格式的方法，其特征在于：所述的地址區，是每一個數據塊的地址，數據塊存有壓縮后的數據或時間序列；所述的參數字典區，其中每一條參數信息包含總線包標識、總線包對應的時間及數據在地址區中的索引；所述的數據區，用于通過地址區直接尋址到對應數據塊。

3.根據權利要求1所述的一種數據處理過程中優化壓縮存儲格式的方法，其特征在于：對于來自同一總線或不同總線的不同數據包，如果時間的起始有偏差，仍用同一時間序列，只要在參數字典區的參數信息再添加時間偏移量即可。