[發(fā)明專(zhuān)利]數(shù)據(jù)采集方法和裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201310611213.3
• 申請(qǐng)日: 2013-11-26
• 公開(kāi)（公告）號(hào): CN103684851A
• 公開(kāi)（公告）日: 2014-03-26
• 發(fā)明（設(shè)計(jì)）人: 楊天曙
• 申請(qǐng)（專(zhuān)利權(quán)）人: 華為技術(shù)有限公司
• 主分類(lèi)號(hào): H04L12/24
• 分類(lèi)號(hào): H04L12/24
• 代理公司: 北京同立鈞成知識(shí)產(chǎn)權(quán)代理有限公司 11205
• 代理人: 劉芳

技術(shù)領(lǐng)域

本發(fā)明涉及通信技術(shù)，尤其涉及一種數(shù)據(jù)采集方法和裝置。

背景技術(shù)

簡(jiǎn)單網(wǎng)絡(luò)管理協(xié)議（Simple?Network?Management?Protocol；簡(jiǎn)稱(chēng)：SNMP）是一個(gè)標(biāo)準(zhǔn)的用于管理IP網(wǎng)絡(luò)上節(jié)點(diǎn)的協(xié)議。被管理的網(wǎng)絡(luò)節(jié)點(diǎn)以管理信息庫(kù)（MIB）的方式描述本網(wǎng)絡(luò)節(jié)點(diǎn)可以通過(guò)SNMP訪問(wèn)和定義的變量。其中，該變量在MIB中以樹(shù)形結(jié)構(gòu)組織，變量即為樹(shù)中的葉子節(jié)點(diǎn)，每個(gè)葉子節(jié)點(diǎn)均分配一個(gè)唯一的對(duì)象標(biāo)識(shí)符（OID），且相關(guān)的變量劃分在同一根下。

另外，在網(wǎng)絡(luò)管理系統(tǒng)中，主要通過(guò)SNMP協(xié)議定時(shí)采集被管理的網(wǎng)絡(luò)節(jié)點(diǎn)中的MIB中定義的變量的數(shù)據(jù)，以根據(jù)該變量的數(shù)據(jù)對(duì)該被管理的網(wǎng)絡(luò)節(jié)點(diǎn)進(jìn)行性能監(jiān)視和數(shù)據(jù)挖掘分析。目前，通過(guò)SNMP協(xié)議定時(shí)采集被管理的網(wǎng)絡(luò)節(jié)點(diǎn)中的MIB中定義的變量的數(shù)據(jù)的方式主要包括兩種：

第一種，網(wǎng)絡(luò)管理系統(tǒng)向用戶(hù)展現(xiàn)被管理的網(wǎng)絡(luò)節(jié)點(diǎn)中的MIB定義的變量時(shí)是習(xí)慣按照變量的相關(guān)性將不同一根下的變量劃分為不同的組展示，另外，還將同一根下的一組變量看作一個(gè)整體。這樣，在進(jìn)行變量的數(shù)據(jù)采集時(shí)，也按照這種分組進(jìn)行采集，即在接收一個(gè)應(yīng)用所需要變量的數(shù)據(jù)和周期的采集請(qǐng)求時(shí)，需要?jiǎng)?chuàng)建一個(gè)采集任務(wù)，以使根據(jù)該周期將該變量所在分組全部采集。此外，在采集不同應(yīng)用所需要變量的數(shù)據(jù)和周期的采集請(qǐng)求時(shí)，需要分別為每個(gè)采集請(qǐng)求創(chuàng)建對(duì)應(yīng)的采集任務(wù)，以分別根據(jù)不同應(yīng)用對(duì)應(yīng)的周期將對(duì)應(yīng)所需要變量所在的分組全部采集。

第二種，在進(jìn)行變量的數(shù)據(jù)采集時(shí)，在接收一個(gè)應(yīng)用所需要變量的數(shù)據(jù)和周期的采集請(qǐng)求時(shí)，創(chuàng)建一個(gè)采集任務(wù)，以使根據(jù)該周期將該變量采集。此外，在采集不同應(yīng)用所需變量的數(shù)據(jù)和周期的采集請(qǐng)求時(shí)，需要分別為每個(gè)采集請(qǐng)求創(chuàng)建對(duì)應(yīng)的采集任務(wù)，以分別根據(jù)不同應(yīng)用對(duì)應(yīng)的周期將對(duì)應(yīng)所需要變量采集。

但是，對(duì)于第一種方式，可能會(huì)造成采集很多不必要的數(shù)據(jù)，從而增加被管理的網(wǎng)絡(luò)節(jié)點(diǎn)的負(fù)擔(dān)，并浪費(fèi)網(wǎng)絡(luò)帶寬。另外，在針對(duì)不同應(yīng)用中所采集的相同變量時(shí)也會(huì)造成不必要的浪費(fèi)，還可能會(huì)導(dǎo)致針對(duì)不同應(yīng)用所采集的相同變量的數(shù)據(jù)不一致的問(wèn)題。對(duì)于第二種方式，當(dāng)一組變量中需要采集的變量的數(shù)據(jù)很多時(shí)，會(huì)造成采集任務(wù)的增加，每個(gè)采集任務(wù)都有各自的報(bào)頭，從而降低了有效載荷，進(jìn)而增加了被管理的網(wǎng)絡(luò)節(jié)點(diǎn)的處理負(fù)擔(dān)。

發(fā)明內(nèi)容

本發(fā)明提供一種數(shù)據(jù)采集方法和裝置，用于解決現(xiàn)有技術(shù)中采集不必要的數(shù)據(jù)，SNMP請(qǐng)求過(guò)多，以及重復(fù)采集而導(dǎo)致數(shù)據(jù)不一致的問(wèn)題，進(jìn)而有效地提高了采集效率。

本發(fā)明的第一個(gè)方面是提供一種數(shù)據(jù)采集處理方法，包括：

接收數(shù)據(jù)采集處理請(qǐng)求，所述數(shù)據(jù)采集處理請(qǐng)求包括采集對(duì)象實(shí)例和采集參數(shù)；

根據(jù)預(yù)設(shè)的歸并復(fù)用規(guī)則和所述采集參數(shù)，創(chuàng)建采集任務(wù)和/或?qū)Ξ?dāng)前存儲(chǔ)的采集任務(wù)進(jìn)行相應(yīng)的處理，以使所述采集參數(shù)中的變量通過(guò)所述變量對(duì)應(yīng)的引用計(jì)數(shù)歸并復(fù)用到一個(gè)采集任務(wù)中；

按照創(chuàng)建后的采集任務(wù)和/或處理后的采集任務(wù)中的周期，構(gòu)建并發(fā)送所述創(chuàng)建后的采集任務(wù)和/或處理后的采集任務(wù)對(duì)應(yīng)的SNMP請(qǐng)求給所述采集對(duì)象實(shí)例對(duì)應(yīng)的被管理的網(wǎng)絡(luò)節(jié)點(diǎn)，以獲取所述被管理的網(wǎng)絡(luò)節(jié)點(diǎn)中所述創(chuàng)建后的采集任務(wù)和/或處理后的采集任務(wù)中的變量的數(shù)據(jù)。

在第一個(gè)方面的第一種可能實(shí)現(xiàn)方式中，當(dāng)所述數(shù)據(jù)采集處理請(qǐng)求為增加數(shù)據(jù)采集處理請(qǐng)求時(shí)，所述采集參數(shù)包括第一變量和第一周期，則所述根據(jù)預(yù)設(shè)的歸并復(fù)用規(guī)則和所述采集參數(shù)，創(chuàng)建采集任務(wù)和/或?qū)Ξ?dāng)前存儲(chǔ)的采集任務(wù)進(jìn)行相應(yīng)的處理，包括：

判斷是否存在第一采集任務(wù)；所述第一采集任務(wù)包含所述第一變量；

若判斷出存在所述第一采集任務(wù)，則判斷所述第一采集任務(wù)的第二周期是否小于或等于所述第一周期；

若判斷出所述第二周期小于或等于所述第一周期，則將所述第一采集任務(wù)中的第一變量對(duì)應(yīng)的引用計(jì)數(shù)加1，并緩存所述第一變量對(duì)應(yīng)的所述第一周期。

結(jié)合第一個(gè)方面的第一種可能實(shí)現(xiàn)方式，在第一個(gè)方面的第二種可能實(shí)現(xiàn)方式中，還包括：若判斷出所述第二周期大于所述第一周期，則判斷所述第一采集任務(wù)中是否還存在除所述第一變量的其他變量；

若判斷出所述第一采集任務(wù)中還存在除所述第一變量的其他變量，則將所述第一采集任務(wù)中的第一變量刪除。

結(jié)合第一個(gè)方面的第二種可能實(shí)現(xiàn)方式，在第一個(gè)方面的第三種可能實(shí)現(xiàn)方式中，還包括：若判斷出所述第一采集任務(wù)中不存在除所述第一變量的其他變量，則將所述第一采集任務(wù)刪除。