[發明專利]數據的內存占用分析方法、裝置及服務器

有效

• 申請號: 201710555165.9
• 申請日: 2017-06-30
• 公開（公告）號: CN107391627B
• 公開（公告）日: 2020-11-03
• 發明（設計）人: 張恒
• 申請（專利權）人: 北京奇虎科技有限公司
• 主分類號: G06F16/22
• 分類號: G06F16/22;G06F12/02
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 胡海國

1.一種數據的內存占用分析方法，其中，各數據在內存中以數據鍵值對方式存儲，所述方法包括：

獲得包含內存中存儲的各數據的數據文件；

對所述數據文件進行數據分析，確定各數據所屬的數據類型；

針對每一數據，依據其數據類型分析該數據鍵對應的數據值的數據結構體；

根據所述數據結構體對應的內存容量計算算法，計算該數據所占用的內存容量，其中，數據所占用的內存容量主要包括：數據鍵所占用的內存容量、數據鍵對應的數據值所占用的內存容量以及數據結構所占用的內存容量。

2.根據權利要求1所述的方法，其中，所述獲得包含內存中存儲的各數據的數據文件進一步包括：

將內存中存儲的數據進行轉存處理，以得到存儲于磁盤中的數據文件。

3.根據權利要求1所述的方法，其中，所述數據類型包括以下一種或多種組合：哈希類型、有序集合類型、列表類型、集合類型和/或字符串類型。

4.根據權利要求3所述的方法，其中，所述哈希類型對應的數據結構體包括：Zipmap結構體和Hashtable結構體；

所述有序集合類型對應的數據結構體包括：Ziplist結構體和Skiplist結構體；

所述列表類型對應的數據結構體包括：Ziplist結構體和Linkedlist結構體；

所述集合類型對應的數據結構體包括：Intset結構體和Hashtable結構體；

所述字符串類型對應的數據結構體包括：Raw結構體和Int結構體。

5.根據權利要求3或4所述的方法，其中，所述針對每一數據，依據其數據類型分析該數據鍵對應的數據值的數據結構體進一步包括：

若該數據的數據類型為哈希類型，則將各個數據鍵對應的數據值所包含的元素數量與第一預設閾值進行比較，以及將每一元素的數據長度與第二預設閾值進行比較，得到比較結果；

若比較結果具體為元素數量小于第一預設閾值且每一元素的數據長度均小于第二預設閾值，則確定該數據鍵對應的數據值的數據結構體為Zipmap結構體；

若比較結果為其他情況，則確定該數據鍵對應的數據值的數據結構體為Hashtable結構體。

6.根據權利要求3或4所述的方法，其中，所述針對每一數據，依據其數據類型分析該數據鍵對應的數據值的數據結構體進一步包括：

若該數據的數據類型為有序集合類型，則將各個數據鍵對應的數據值所包含的元素數量與第三預設閾值進行比較，以及將每一元素的數據長度與第四預設閾值進行比較，得到比較結果；

若比較結果具體為元素數量小于第三預設閾值且每一元素的數據長度均小于第四預設閾值，則確定該數據鍵對應的數據值的數據結構體為Ziplist結構體；

若比較結果為其他情況，則確定該數據鍵對應的數據值的數據結構體為Skiplist結構體。

7.根據權利要求3或4所述的方法，其中，所述針對每一數據，依據其數據類型分析該數據鍵對應的數據值的數據結構體進一步包括：

若該數據的數據類型為列表類型，則將各個數據鍵對應的數據值所包含的元素數量與第五預設閾值進行比較，以及將每一元素的數據長度與第六預設閾值進行比較，得到比較結果；

若比較結果具體為元素數量小于第五預設閾值且每一元素的數據長度均小于第六預設閾值，則確定該數據鍵對應的數據值的數據結構體為Ziplist結構體；

若比較結果為其他情況，則確定該數據鍵對應的數據值的數據結構體為Linkedlist結構體。