[發(fā)明專利]基于數(shù)據(jù)壓縮的業(yè)務數(shù)據(jù)動態(tài)存儲方法及裝置

有效

• 申請?zhí)枺?/td>: 202010193763.8
• 申請日: 2020-03-19
• 公開（公告）號: CN111090786B
• 公開（公告）日: 2020-06-26
• 發(fā)明（設計）人: 楊貽宏
• 申請（專利權(quán)）人: 上海飛旗網(wǎng)絡技術股份有限公司
• 主分類號: G06F16/901
• 分類號: G06F16/901
• 代理公司: 成都頂峰專利事務所(普通合伙) 51224
• 代理人: 曾凱

本發(fā)明提供了一種基于數(shù)據(jù)壓縮的業(yè)務數(shù)據(jù)動態(tài)存儲方法及裝置。首先，確定目標數(shù)據(jù)業(yè)務的數(shù)據(jù)容量均值并結(jié)合動態(tài)存儲設備的存儲區(qū)的剩余存儲容量值確定存儲溢出容量值。其次，確定存儲區(qū)中的每個業(yè)務數(shù)據(jù)集的數(shù)據(jù)活躍度并根據(jù)數(shù)據(jù)活躍度的大小順序以及存儲溢出容量值對確定得到的待壓縮數(shù)據(jù)進行特征提取得到數(shù)據(jù)特征向量。最后，在對當前業(yè)務數(shù)據(jù)進行存儲時，根據(jù)每個數(shù)據(jù)特征向量將每個待壓縮數(shù)據(jù)進行壓縮存儲以釋放目標存儲容量值，使得動態(tài)存儲設備可以將當前業(yè)務數(shù)據(jù)進行完整地存儲。如此，可以將存儲區(qū)中已存儲的業(yè)務數(shù)據(jù)進行壓縮以實現(xiàn)動態(tài)存儲，從而釋放存儲區(qū)的存儲容量，確保將當前業(yè)務數(shù)據(jù)完整地進行存儲，避免當前業(yè)務數(shù)據(jù)的丟失。

技術領域

本發(fā)明涉及大數(shù)據(jù)存儲技術領域，具體而言，涉及一種基于數(shù)據(jù)壓縮的業(yè)務數(shù)據(jù)動態(tài)存儲方法及裝置。

背景技術

隨著大數(shù)據(jù)通信的迅速發(fā)展，大數(shù)據(jù)資源的類型不斷增多且數(shù)據(jù)規(guī)模不斷增大，對數(shù)據(jù)存儲設備的各方面要求也在不斷提高。在對海量數(shù)據(jù)進行存儲管理時，數(shù)據(jù)存儲設備的存儲性能和存儲效率是應對不同存儲需求的關鍵。然而數(shù)據(jù)存儲設備在對數(shù)據(jù)進行存儲時，可能因為存儲性能刻板且存儲效率低下而導致部分數(shù)據(jù)的丟失。

發(fā)明內(nèi)容

為了改善上述問題，本發(fā)明提供了一種基于數(shù)據(jù)壓縮的業(yè)務數(shù)據(jù)動態(tài)存儲方法及裝置。

本發(fā)明實施例的第一方面，提供了一種基于數(shù)據(jù)壓縮的業(yè)務數(shù)據(jù)動態(tài)存儲方法，應用于與業(yè)務終端通信的動態(tài)存儲設備，所述方法包括：

根據(jù)所述動態(tài)存儲設備的業(yè)務數(shù)據(jù)存儲記錄確定歷史業(yè)務數(shù)據(jù)的數(shù)據(jù)容量均值，所述歷史業(yè)務數(shù)據(jù)是指所述業(yè)務終端臨時存儲在所述動態(tài)存儲設備中的業(yè)務數(shù)據(jù)；

根據(jù)所述數(shù)據(jù)容量均值以及所述動態(tài)存儲設備的存儲區(qū)的剩余存儲容量值，確定所述數(shù)據(jù)容量均值相對于所述剩余存儲容量值的存儲溢出容量值；

基于所述動態(tài)存儲設備的數(shù)據(jù)調(diào)用記錄，確定存儲于所述動態(tài)存儲設備的存儲區(qū)中的每個業(yè)務數(shù)據(jù)集的數(shù)據(jù)活躍度；

根據(jù)數(shù)據(jù)活躍度由小到大的順序以及所述存儲溢出容量值從所述存儲區(qū)中的所有業(yè)務數(shù)據(jù)集中確定待壓縮數(shù)據(jù)，并對所述待壓縮數(shù)據(jù)進行特征提取，得到每個待壓縮數(shù)據(jù)對應的數(shù)據(jù)特征向量；

在接收到所述業(yè)務終端發(fā)送的用于儲存當前業(yè)務數(shù)據(jù)的數(shù)據(jù)存儲請求時，根據(jù)每個數(shù)據(jù)特征向量將每個待壓縮數(shù)據(jù)進行壓縮存儲；

向所述業(yè)務終端發(fā)送響應信息，接收所述業(yè)務終端發(fā)送的當前業(yè)務數(shù)據(jù)并將當前業(yè)務數(shù)據(jù)存儲至所述存儲區(qū)中。

在一種可替換的實施方式中，所述方法還包括：

判斷在設定時長內(nèi)是否接收到所述業(yè)務終端發(fā)送的用于獲取所述存儲區(qū)中的當前業(yè)務數(shù)據(jù)的第一數(shù)據(jù)獲取指令；

若在所述設定時長內(nèi)接收到所述第一數(shù)據(jù)獲取指令，則將當前業(yè)務數(shù)據(jù)發(fā)送給所述業(yè)務終端，并在從所述存儲區(qū)中刪除當前業(yè)務數(shù)據(jù)后，根據(jù)每個數(shù)據(jù)特征向量將壓縮存儲的每個待壓縮數(shù)據(jù)進行還原；

若在所述設定時長內(nèi)未接收到所述第一數(shù)據(jù)獲取指令，則將當前業(yè)務數(shù)據(jù)從所述存儲區(qū)中刪除后，根據(jù)每個數(shù)據(jù)特征向量將壓縮存儲的每個待壓縮數(shù)據(jù)進行還原。

在一種可替換的實施方式中，所述方法還包括：

判斷在設定時長內(nèi)是否接收到其它終端發(fā)送的用于獲取所述存儲區(qū)中的當前業(yè)務數(shù)據(jù)的第二數(shù)據(jù)獲取指令；

在所述設定時長內(nèi)接收到所述第二數(shù)據(jù)獲取指令時，解析所述第二數(shù)據(jù)獲取指令得到所述第二數(shù)據(jù)獲取指令中包括的校驗字段；

從存儲于所述存儲區(qū)的當前業(yè)務數(shù)據(jù)中獲取用于對所述校驗字段進驗證的動態(tài)隨機數(shù)；

根據(jù)所述動態(tài)隨機數(shù)對所述校驗字段進行校驗得到校驗結(jié)果；