[發(fā)明專利]基于多數(shù)據(jù)源的大規(guī)模無(wú)線局域網(wǎng)數(shù)據(jù)采集與處理方法

有效

• 申請(qǐng)?zhí)枺?/td>: 202111033400.9
• 申請(qǐng)日: 2021-09-03
• 公開(kāi)（公告）號(hào): CN114095800B
• 公開(kāi)（公告）日: 2023-08-25
• 發(fā)明（設(shè)計(jì)）人: 向望;徐竟祎;沈敏虎;沈佳杰;萬(wàn)儼慧;李煒瑩;趙澤宇;王新
• 申請(qǐng)（專利權(quán)）人: 復(fù)旦大學(xué)
• 主分類號(hào): H04Q9/00
• 分類號(hào): H04Q9/00;H04W84/18;G08C17/02;G06F16/25;G06F16/31
• 代理公司: 上海德昭知識(shí)產(chǎn)權(quán)代理有限公司 31204
• 代理人: 郁旦蓉

本發(fā)明公開(kāi)了一種基于多數(shù)據(jù)源的大規(guī)模無(wú)線局域網(wǎng)數(shù)據(jù)采集與處理方法，包括以下步驟：步驟1，用DHCP數(shù)據(jù)處理采集與存儲(chǔ)DCHP系統(tǒng)IP地址租約數(shù)據(jù)，得到終端類型數(shù)據(jù)；步驟2，用AAA認(rèn)證數(shù)據(jù)處理采集與存儲(chǔ)AAA認(rèn)證系統(tǒng)用戶認(rèn)證數(shù)據(jù)，得到AAA結(jié)構(gòu)化數(shù)據(jù)；步驟3，用SNMP數(shù)據(jù)處理采集網(wǎng)絡(luò)設(shè)備、無(wú)線終端和無(wú)線干擾源的運(yùn)行數(shù)據(jù)，并結(jié)合終端類型數(shù)據(jù)和用戶認(rèn)證數(shù)據(jù)一并處理，得到SNMP結(jié)構(gòu)化數(shù)據(jù)；步驟4，用日志數(shù)據(jù)處理采集與存儲(chǔ)NAT系統(tǒng)地址轉(zhuǎn)換、DNS系統(tǒng)域名解析和AC的日志數(shù)據(jù)，得到日志結(jié)構(gòu)化數(shù)據(jù)；步驟5，用SFLOW流量數(shù)據(jù)處理采集與存儲(chǔ)SFLOW流量數(shù)據(jù)，得到SFLOW流量結(jié)構(gòu)化數(shù)據(jù)；步驟6，將結(jié)構(gòu)化數(shù)據(jù)存入無(wú)線網(wǎng)核心數(shù)據(jù)庫(kù)；步驟7，將核心數(shù)據(jù)庫(kù)輸入智能運(yùn)維系統(tǒng)。

技術(shù)領(lǐng)域

本發(fā)明涉及智能運(yùn)維領(lǐng)域，具體涉及一種基于多數(shù)據(jù)源的大規(guī)模無(wú)線局域網(wǎng)數(shù)據(jù)采集與處理方法。

背景技術(shù)

隨著無(wú)線局域網(wǎng)技術(shù)、移動(dòng)終端設(shè)備和移動(dòng)應(yīng)用的不斷改革與發(fā)展，WLAN已經(jīng)不再作為有線網(wǎng)絡(luò)的補(bǔ)充，而是成為了主要的網(wǎng)絡(luò)接入方式。在家庭網(wǎng)絡(luò)中，基于WLAN技術(shù)的WiFi網(wǎng)絡(luò)已經(jīng)完全替代有線網(wǎng)絡(luò)，從個(gè)人電腦、手機(jī)、平板電腦等傳統(tǒng)終端設(shè)備，到家用電器、傳感器等物聯(lián)網(wǎng)設(shè)備，再到電動(dòng)汽車等新能源設(shè)備，都能通過(guò)家庭WiFi接入互聯(lián)網(wǎng)。在園區(qū)范圍的網(wǎng)絡(luò)覆蓋中，WLAN一般采用大規(guī)模部署和獨(dú)立組網(wǎng)，包含數(shù)百至數(shù)萬(wàn)臺(tái)設(shè)備，成為用戶終端的主要網(wǎng)絡(luò)接入方式。大規(guī)模無(wú)線網(wǎng)絡(luò)系統(tǒng)建成以后，為了了解網(wǎng)絡(luò)運(yùn)行狀況、監(jiān)測(cè)網(wǎng)絡(luò)性能，需要對(duì)網(wǎng)絡(luò)進(jìn)行管理、監(jiān)控和測(cè)量，進(jìn)而對(duì)無(wú)線網(wǎng)絡(luò)系統(tǒng)進(jìn)行優(yōu)化和改進(jìn)，更好的為用戶終端提供高速穩(wěn)定的服務(wù)。

智能運(yùn)維AIOps是于2016年提出的概念，得益于科研人員在深度學(xué)習(xí)方面取得的巨大突破，智能運(yùn)維已逐漸能夠進(jìn)行實(shí)際有效的應(yīng)用。AIOps的核心技術(shù)就是大數(shù)據(jù)(BigData)和機(jī)器學(xué)習(xí)(Machine?Learning)，對(duì)網(wǎng)絡(luò)系統(tǒng)來(lái)說(shuō)，即是自動(dòng)采集網(wǎng)絡(luò)系統(tǒng)運(yùn)行中產(chǎn)生的各類數(shù)據(jù)、清洗整理后形成整體的大數(shù)據(jù)集，再通過(guò)機(jī)器學(xué)習(xí)方法來(lái)進(jìn)行智能分析，分析出的結(jié)果可用于網(wǎng)絡(luò)優(yōu)化和各類應(yīng)用系統(tǒng)，如分析發(fā)現(xiàn)出網(wǎng)絡(luò)中存在的一些問(wèn)題、故障，可通過(guò)一定的策略進(jìn)行自動(dòng)化修正。大規(guī)模無(wú)線局域網(wǎng)中，時(shí)時(shí)刻刻都在產(chǎn)生大量數(shù)據(jù)，從接入層至出口鏈路的設(shè)備，包括AP、AC、接入交換機(jī)、匯聚交換機(jī)、核心交換機(jī)、防火墻(NAT)、DNS系統(tǒng)、DHCP系統(tǒng)等都會(huì)產(chǎn)生不同類型的數(shù)據(jù)，這些多源數(shù)據(jù)也是多元化的，如流量、NAT地址轉(zhuǎn)換、安全防護(hù)日志、無(wú)線控制器日志、無(wú)線AP運(yùn)行狀態(tài)、AAA系統(tǒng)的認(rèn)證、計(jì)費(fèi)信息等等。無(wú)線網(wǎng)絡(luò)比有線網(wǎng)絡(luò)多一層AP層，由于無(wú)線傳輸媒介的不確定性比較大，相比有線網(wǎng)絡(luò)而言，無(wú)線網(wǎng)絡(luò)的穩(wěn)定更具有挑戰(zhàn)性，網(wǎng)絡(luò)運(yùn)維也更加復(fù)雜、工作量更大，因此更加需要智能運(yùn)維系統(tǒng)的應(yīng)用。本發(fā)明采集大規(guī)模無(wú)線局域網(wǎng)運(yùn)行產(chǎn)生的各種數(shù)據(jù)，并對(duì)采集的數(shù)據(jù)進(jìn)行清洗、組合與存儲(chǔ)等處理，形成大數(shù)據(jù)集供智能運(yùn)維系統(tǒng)使用。

發(fā)明內(nèi)容

本發(fā)明是為了解決上述問(wèn)題而進(jìn)行的，目的在于提供一種基于多數(shù)據(jù)源的大規(guī)模無(wú)線局域網(wǎng)數(shù)據(jù)采集與處理方法。

本發(fā)明提供了一種基于多數(shù)據(jù)源的大規(guī)模無(wú)線局域網(wǎng)數(shù)據(jù)采集與處理方法，具有這樣的特征，包括以下步驟：

步驟1，采用動(dòng)態(tài)主機(jī)配置協(xié)議(DHCP)數(shù)據(jù)處理流程通過(guò)數(shù)據(jù)庫(kù)訪問(wèn)采集與處理DHCP系統(tǒng)的互聯(lián)網(wǎng)協(xié)議(IP)地址租約數(shù)據(jù)，得到終端類型數(shù)據(jù)。

步驟2，采用AAA認(rèn)證數(shù)據(jù)處理流程數(shù)據(jù)庫(kù)訪問(wèn)采集與處理AAA認(rèn)證系統(tǒng)的用戶認(rèn)證數(shù)據(jù)，得到用戶認(rèn)證數(shù)據(jù)和AAA結(jié)構(gòu)化數(shù)據(jù)。

步驟3，采用簡(jiǎn)單網(wǎng)絡(luò)管理協(xié)議(SNMP)數(shù)據(jù)處理流程通過(guò)SNMP協(xié)議采集網(wǎng)絡(luò)設(shè)備的運(yùn)行數(shù)據(jù)、無(wú)線終端的運(yùn)行數(shù)據(jù)和無(wú)線干擾源的運(yùn)行數(shù)據(jù)，并結(jié)合DHCP數(shù)據(jù)處理流程輸入的終端類型數(shù)據(jù)和AAA認(rèn)證數(shù)據(jù)處理流程輸入的用戶認(rèn)證數(shù)據(jù)一并進(jìn)行處理和存儲(chǔ)，得到SNMP結(jié)構(gòu)化數(shù)據(jù)。

步驟4，采用日志數(shù)據(jù)處理流程通過(guò)系統(tǒng)日志協(xié)議(SYSLOG)采集與處理網(wǎng)絡(luò)地址轉(zhuǎn)換(NAT)系統(tǒng)的地址轉(zhuǎn)換日志數(shù)據(jù)、域名(DNS)系統(tǒng)的域名解析日志數(shù)據(jù)和無(wú)線控制器(AC)的日志數(shù)據(jù)，得到日志結(jié)構(gòu)化數(shù)據(jù)。