[發(fā)明專利]數(shù)據(jù)的內(nèi)存占用分析方法、裝置及服務(wù)器

有效

• 申請(qǐng)?zhí)枺?/td>: 201710555165.9
• 申請(qǐng)日: 2017-06-30
• 公開(kāi)（公告）號(hào): CN107391627B
• 公開(kāi)（公告）日: 2020-11-03
• 發(fā)明（設(shè)計(jì)）人: 張恒
• 申請(qǐng)（專利權(quán)）人: 北京奇虎科技有限公司
• 主分類號(hào): G06F16/22
• 分類號(hào): G06F16/22;G06F12/02
• 代理公司: 深圳市世紀(jì)恒程知識(shí)產(chǎn)權(quán)代理事務(wù)所 44287
• 代理人: 胡海國(guó)

本發(fā)明公開(kāi)了一種數(shù)據(jù)的內(nèi)存占用分析方法、裝置、服務(wù)器及計(jì)算機(jī)存儲(chǔ)介質(zhì)。其中，各數(shù)據(jù)在內(nèi)存中以數(shù)據(jù)鍵值對(duì)方式存儲(chǔ)，方法包括：獲得包含內(nèi)存中存儲(chǔ)的各數(shù)據(jù)的數(shù)據(jù)文件；對(duì)數(shù)據(jù)文件進(jìn)行數(shù)據(jù)分析，確定各數(shù)據(jù)所屬的數(shù)據(jù)類型；針對(duì)每一數(shù)據(jù)，依據(jù)其數(shù)據(jù)類型分析該數(shù)據(jù)鍵對(duì)應(yīng)的數(shù)據(jù)值的數(shù)據(jù)結(jié)構(gòu)體；根據(jù)數(shù)據(jù)結(jié)構(gòu)體對(duì)應(yīng)的內(nèi)存容量計(jì)算算法，計(jì)算該數(shù)據(jù)所占用的內(nèi)存容量，從而克服了現(xiàn)有技術(shù)方案無(wú)法獲知數(shù)據(jù)所占用的內(nèi)存容量的缺陷，另外，本發(fā)明是在獲取到內(nèi)存中存儲(chǔ)的各數(shù)據(jù)的數(shù)據(jù)文件進(jìn)行數(shù)據(jù)分析，有效地提高了分析效率，而且還不會(huì)影響內(nèi)存的正常運(yùn)行。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，具體涉及一種數(shù)據(jù)的內(nèi)存占用分析方法、裝置、服務(wù)器及計(jì)算機(jī)存儲(chǔ)介質(zhì)。

背景技術(shù)

數(shù)據(jù)庫(kù)(Database)是按照數(shù)據(jù)結(jié)構(gòu)來(lái)組織、存儲(chǔ)和管理數(shù)據(jù)的數(shù)據(jù)處理系統(tǒng)，隨著互聯(lián)網(wǎng)的發(fā)展，數(shù)據(jù)庫(kù)的應(yīng)用更加廣泛，其性能要求也越來(lái)越高。目前數(shù)據(jù)庫(kù)系統(tǒng)必須具備較高的事務(wù)處理速度和應(yīng)用可靠性。

對(duì)于Redis這類基于內(nèi)存的數(shù)據(jù)庫(kù)，經(jīng)常會(huì)面臨內(nèi)存容量莫名的增長(zhǎng)，其中，無(wú)效數(shù)據(jù)(例如垃圾數(shù)據(jù)、無(wú)用數(shù)據(jù)、過(guò)期數(shù)據(jù)等)會(huì)消耗大量的內(nèi)存，從而大大提高了硬件成本。對(duì)于Redis數(shù)據(jù)庫(kù)來(lái)說(shuō)，數(shù)據(jù)在內(nèi)存中以數(shù)據(jù)鍵值對(duì)方式存儲(chǔ)，然而，Redis數(shù)據(jù)庫(kù)本身無(wú)法得知數(shù)據(jù)鍵對(duì)應(yīng)的數(shù)據(jù)所占用的內(nèi)存，導(dǎo)致數(shù)據(jù)庫(kù)開(kāi)發(fā)人員也就無(wú)法獲知內(nèi)存的占用情況。

發(fā)明內(nèi)容

鑒于上述問(wèn)題，提出了本發(fā)明以便提供一種克服上述問(wèn)題或者至少部分地解決上述問(wèn)題的數(shù)據(jù)的內(nèi)存占用分析方法、數(shù)據(jù)的內(nèi)存占用分析裝置、服務(wù)器和計(jì)算機(jī)存儲(chǔ)介質(zhì)。

根據(jù)本發(fā)明的一個(gè)方面，提供了一種數(shù)據(jù)的內(nèi)存占用分析方法，其中，各數(shù)據(jù)在內(nèi)存中以數(shù)據(jù)鍵值對(duì)方式存儲(chǔ)，該方法包括：

獲得包含內(nèi)存中存儲(chǔ)的各數(shù)據(jù)的數(shù)據(jù)文件；

對(duì)數(shù)據(jù)文件進(jìn)行數(shù)據(jù)分析，確定各數(shù)據(jù)所屬的數(shù)據(jù)類型；

針對(duì)每一數(shù)據(jù)，依據(jù)其數(shù)據(jù)類型分析該數(shù)據(jù)鍵對(duì)應(yīng)的數(shù)據(jù)值的數(shù)據(jù)結(jié)構(gòu)體；

根據(jù)數(shù)據(jù)結(jié)構(gòu)體對(duì)應(yīng)的內(nèi)存容量計(jì)算算法，計(jì)算該數(shù)據(jù)所占用的內(nèi)存容量。

根據(jù)本發(fā)明的另一方面，提供了一種數(shù)據(jù)的內(nèi)存占用分析裝置，其中，各數(shù)據(jù)在內(nèi)存中以數(shù)據(jù)鍵值對(duì)方式存儲(chǔ)，該裝置包括：

獲取模塊，適于獲得包含內(nèi)存中存儲(chǔ)的各數(shù)據(jù)的數(shù)據(jù)文件；

數(shù)據(jù)類型分析模塊，適于對(duì)數(shù)據(jù)文件進(jìn)行數(shù)據(jù)分析，確定各數(shù)據(jù)所屬的數(shù)據(jù)類型；

數(shù)據(jù)結(jié)構(gòu)體分析模塊，適于針對(duì)每一數(shù)據(jù)，依據(jù)其數(shù)據(jù)類型分析該數(shù)據(jù)鍵對(duì)應(yīng)的數(shù)據(jù)值的數(shù)據(jù)結(jié)構(gòu)體；

計(jì)算模塊，適于根據(jù)數(shù)據(jù)結(jié)構(gòu)體對(duì)應(yīng)的內(nèi)存容量計(jì)算算法，計(jì)算該數(shù)據(jù)所占用的內(nèi)存容量。

根據(jù)本發(fā)明的又一方面，提供了一種服務(wù)器，包括：處理器、存儲(chǔ)器、通信接口和通信總線，處理器、存儲(chǔ)器和通信接口通過(guò)通信總線完成相互間的通信；

存儲(chǔ)器用于存放至少一可執(zhí)行指令，可執(zhí)行指令使處理器執(zhí)行上述數(shù)據(jù)的內(nèi)存占用分析方法對(duì)應(yīng)的操作。

根據(jù)本發(fā)明的再一方面，提供了一種計(jì)算機(jī)存儲(chǔ)介質(zhì)，存儲(chǔ)介質(zhì)中存儲(chǔ)有至少一可執(zhí)行指令，可執(zhí)行指令使處理器執(zhí)行如上述數(shù)據(jù)的內(nèi)存占用分析方法對(duì)應(yīng)的操作。

根據(jù)本發(fā)明提供的方案，獲得包含內(nèi)存中存儲(chǔ)的各數(shù)據(jù)的數(shù)據(jù)文件；對(duì)數(shù)據(jù)文件進(jìn)行數(shù)據(jù)分析，確定各數(shù)據(jù)所屬的數(shù)據(jù)類型；針對(duì)每一數(shù)據(jù)，依據(jù)其數(shù)據(jù)類型分析該數(shù)據(jù)鍵對(duì)應(yīng)的數(shù)據(jù)值的數(shù)據(jù)結(jié)構(gòu)體；根據(jù)數(shù)據(jù)結(jié)構(gòu)體對(duì)應(yīng)的內(nèi)存容量計(jì)算算法，計(jì)算該數(shù)據(jù)所占用的內(nèi)存容量，從而克服了現(xiàn)有技術(shù)方案無(wú)法獲知數(shù)據(jù)所占用的內(nèi)存容量的缺陷，另外，本發(fā)明是在獲取到內(nèi)存中存儲(chǔ)的各數(shù)據(jù)的數(shù)據(jù)文件進(jìn)行數(shù)據(jù)分析，有效地提高了分析效率，而且還不會(huì)影響內(nèi)存的正常運(yùn)行。