[發明專利]一種用于數據存儲的方法、裝置及計算機設備

有效

• 申請號: 201810014959.9
• 申請日: 2018-01-08
• 公開（公告）號: CN108233942B
• 公開（公告）日: 2022-02-22
• 發明（設計）人: 胡耀文;張文明;陳少杰
• 申請（專利權）人: 武漢斗魚網絡科技有限公司
• 主分類號: H03M7/30
• 分類號: H03M7/30;G06F3/06
• 代理公司: 北京眾達德權知識產權代理有限公司 11570
• 代理人: 劉杰

本發明實施例提供了一種用于數據存儲的方法、裝置及計算機設備，應用在直播平臺中，所述方法包括：獲取多份性能采樣數據，所述性能采樣數據包括：多種方法名稱及對應的運行數據；將每份所述性能數據中的每種方法名稱作為不同的基本元素進行字符串編碼，生成多個非共享編碼表；基于多個所述非共享編碼表，分別查找每種編碼后的所述方法名稱；將所述非共享編碼表分別與每種編碼后的所述方法名稱進行一次壓縮，獲取一次壓縮后的各方法名稱；分別將一次壓縮后的每種所述方法名稱及每種所述方法名稱對應的運行數據進行序列化，生成字符串序列；將所述字符串序列進行二次壓縮，獲取壓縮結果，將所述壓縮結果存儲至數據庫中。

技術領域

本發明屬于網絡運行技術領域，尤其涉及一種用于數據存儲的方法、裝置及計算機設備。

背景技術

在使用xhprof進行性能采樣后，需要將采樣數據存儲到數據庫中以待檢索和分析。

性能采樣數據是一個很大的數組，常用的處理方法先利用常規壓縮算法壓縮后進行存儲，這種方法主要的缺陷在于將待壓縮的內容按單個字符進行編碼，導致壓縮率低。

發明內容

針對現有技術存在的問題，本發明實施例提供了一種用于數據存儲的方法、裝置及計算機設備，用于解決現有技術中對性能采樣數據進行壓縮時，壓縮率低導致占用的存儲空間較大的技術問題。

本發明提供一種用于數據存儲的方法，應用在直播平臺中，所述方法包括：

獲取多份性能采樣數據，所述性能采樣數據包括：多種方法名稱及對應的運行數據；

將每份所述性能數據中的每種方法名稱作為不同的基本元素進行字符串編碼，生成多個非共享編碼表；

基于多個所述非共享編碼表，分別查找每種編碼后的所述方法名稱；

將所述非共享編碼表分別與每種編碼后的所述方法名稱進行一次壓縮，獲取一次壓縮后的各方法名稱；

分別將一次壓縮后的每種所述方法名稱及每種所述方法名稱對應的運行數據進行序列化，生成字符串序列；

將所述字符串序列進行二次壓縮，獲取壓縮結果，將所述壓縮結果存儲至數據庫中。

上述方案中，所述將每種方法名稱作為不同的基本元素進行字符串編碼，生成編碼表，包括：

分別統計多份所述性能采樣數據中每種方法名稱的數量；

為每份性能采樣數據中的每種方法名稱分配一個唯一的字符串；

將每份性能采樣數據種所述每種方法名稱、所述每種方法名稱的數量以及對應的字符串分別存儲至對應的映射表中，所述映射表為非共享編碼表，所述對應的字符串是預設的。

上述方案中，在所述字符串序列中，不同的字符串之間設置有分隔符。

上述方案中，所述運行數據包括：每種所述方法名稱的運行時間、運行次數、運行占用的內存及中央處理器(CPU，Central Processing Unit)使用率。

本發明還提供一種用于數據存儲的裝置，所述裝置包括：

獲取單元，用于獲取多份性能采樣數據，所述性能采樣數據包括：多種方法名稱及對應的運行數據；

編碼單元，用于將每份所述性能數據中的每種方法名稱作為不同的基本元素進行字符串編碼，生成多個非共享編碼表；

查找單元，用于基于多個所述非共享編碼表，分別查找每種編碼后的所述方法名稱；

第一壓縮單元，用于將所述非共享編碼表分別與每種編碼后的所述方法名稱進行一次壓縮，獲取一次壓縮后的各方法名稱；