[發(fā)明專利]日志處理方法及系統(tǒng)在審
| 申請?zhí)枺?/td> | 201711402638.8 | 申請日: | 2017-12-22 |
| 公開(公告)號: | CN108123840A | 公開(公告)日: | 2018-06-05 |
| 發(fā)明(設(shè)計)人: | 彭佳 | 申請(專利權(quán))人: | 中國聯(lián)合網(wǎng)絡(luò)通信集團有限公司 |
| 主分類號: | H04L12/24 | 分類號: | H04L12/24 |
| 代理公司: | 北京天昊聯(lián)合知識產(chǎn)權(quán)代理有限公司 11112 | 代理人: | 彭瑞欣;汪源 |
| 地址: | 100033 *** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 日志數(shù)據(jù) 日志處理 網(wǎng)絡(luò)設(shè)備 預(yù)設(shè) 過濾 格式化處理 格式轉(zhuǎn)換 過濾處理 實時分析 輸入規(guī)則 數(shù)據(jù)關(guān)聯(lián) 同一數(shù)據(jù) 異構(gòu)性 采集 | ||
1.一種日志處理方法,其特征在于,包括:
采集網(wǎng)絡(luò)設(shè)備的第一日志數(shù)據(jù);
根據(jù)預(yù)設(shè)輸入規(guī)則對所述第一日志數(shù)據(jù)進(jìn)行過濾處理;
根據(jù)預(yù)設(shè)根規(guī)則對過濾后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將過濾后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式。
2.根據(jù)權(quán)利要求1所述的日志處理方法,其特征在于,所述根據(jù)預(yù)設(shè)根規(guī)則對過濾后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將各過濾后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式包括:
根據(jù)預(yù)設(shè)根規(guī)則對過濾后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)解析處理;
根據(jù)預(yù)設(shè)根規(guī)則對解析后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將解析后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式。
3.根據(jù)權(quán)利要求2所述的日志處理方法,其特征在于,所述對解析后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將解析后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式之后還包括:
根據(jù)預(yù)設(shè)根規(guī)則對格式化后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)關(guān)聯(lián)。
4.根據(jù)權(quán)利要求3所述的日志處理方法,其特征在于,所述根據(jù)預(yù)設(shè)根規(guī)則對格式化后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)關(guān)聯(lián)包括:
根據(jù)格式化后的第一日志數(shù)據(jù)生成第一日志數(shù)據(jù)對應(yīng)的關(guān)聯(lián)關(guān)鍵字集;
根據(jù)所述關(guān)聯(lián)關(guān)鍵字集對格式化后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)關(guān)聯(lián)。
5.根據(jù)權(quán)利要求3所述的日志處理方法,其特征在于,所述根據(jù)預(yù)設(shè)根規(guī)則對過濾后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將各過濾后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式之后還包括:
根據(jù)預(yù)設(shè)輸出規(guī)則對關(guān)聯(lián)后的第一日志數(shù)據(jù)進(jìn)行過濾處理,生成第二日志數(shù)據(jù);
根據(jù)預(yù)設(shè)預(yù)警規(guī)則對所述第二日志數(shù)據(jù)設(shè)置預(yù)警等級;
將各預(yù)警等級對應(yīng)的第二日志數(shù)據(jù)存儲至分布式歸檔隊列。
6.一種日志處理系統(tǒng),其特征在于,包括:
日志采集模塊,用于采集網(wǎng)絡(luò)設(shè)備的第一日志數(shù)據(jù);
輸入規(guī)則模塊,用于根據(jù)預(yù)設(shè)輸入規(guī)則對所述第一日志數(shù)據(jù)進(jìn)行過濾處理;
根規(guī)則模塊,用于根據(jù)預(yù)設(shè)根規(guī)則對過濾后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將過濾后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式。
7.根據(jù)權(quán)利要求6所述的日志處理系統(tǒng),其特征在于,
所述根規(guī)則模塊具體用于根據(jù)預(yù)設(shè)根規(guī)則對過濾后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)解析處理;根據(jù)預(yù)設(shè)根規(guī)則對解析后的第一日志數(shù)據(jù)進(jìn)行格式化處理,以將解析后的第一日志數(shù)據(jù)的格式轉(zhuǎn)換為同一數(shù)據(jù)格式。
8.根據(jù)權(quán)利要求7所述的日志處理系統(tǒng),其特征在于,
所述根規(guī)則模塊具體還用于根據(jù)預(yù)設(shè)根規(guī)則對格式化后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)關(guān)聯(lián)。
9.根據(jù)權(quán)利要求8所述的日志處理系統(tǒng),其特征在于,
所述根規(guī)則模塊具體用于根據(jù)格式化后的第一日志數(shù)據(jù)生成第一日志數(shù)據(jù)對應(yīng)的關(guān)聯(lián)關(guān)鍵字集;根據(jù)所述關(guān)聯(lián)關(guān)鍵字集對格式化后的第一日志數(shù)據(jù)進(jìn)行數(shù)據(jù)關(guān)聯(lián)。
10.根據(jù)權(quán)利要求8所述的日志處理系統(tǒng),其特征在于,還包括:
輸出規(guī)則模塊,用于根據(jù)預(yù)設(shè)輸出規(guī)則對關(guān)聯(lián)后的第一日志數(shù)據(jù)進(jìn)行過濾處理,生成第二日志數(shù)據(jù);
預(yù)警規(guī)則模塊,用于根據(jù)預(yù)設(shè)預(yù)警規(guī)則對所述第二日志數(shù)據(jù)設(shè)置預(yù)警等級;
存儲模塊,用于將各預(yù)警等級對應(yīng)的第二日志數(shù)據(jù)存儲至分布式歸檔隊列。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于中國聯(lián)合網(wǎng)絡(luò)通信集團有限公司,未經(jīng)中國聯(lián)合網(wǎng)絡(luò)通信集團有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201711402638.8/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 一種日志處理方法、裝置及數(shù)據(jù)庫系統(tǒng)
- 日志去重方法和系統(tǒng)、內(nèi)容分發(fā)網(wǎng)絡(luò)系統(tǒng)
- 一種基于Spark的應(yīng)用軟件運行日志的收集與服務(wù)處理系統(tǒng)及方法
- 一種網(wǎng)絡(luò)日志數(shù)據(jù)同步系統(tǒng)及方法
- 一種日志數(shù)據(jù)處理方法及系統(tǒng)
- 日志數(shù)據(jù)收集方法、日志數(shù)據(jù)收集裝置、存儲介質(zhì)和日志數(shù)據(jù)收集系統(tǒng)
- 一種電力信息系統(tǒng)多源日志數(shù)據(jù)處理方法
- 一種日志數(shù)據(jù)壓縮方法、裝置、設(shè)備和存儲介質(zhì)
- 一種日志數(shù)據(jù)收集方法及日志數(shù)據(jù)收集系統(tǒng)
- 計算機系統(tǒng)的日志數(shù)據(jù)處理方法
- 網(wǎng)絡(luò)設(shè)備管理方法、網(wǎng)絡(luò)設(shè)備和網(wǎng)絡(luò)設(shè)備管理系統(tǒng)
- 報文轉(zhuǎn)發(fā)路徑確定方法及網(wǎng)絡(luò)設(shè)備、控制設(shè)備
- 在包含虛擬網(wǎng)絡(luò)設(shè)備的網(wǎng)絡(luò)環(huán)境中優(yōu)化路徑的方法、網(wǎng)絡(luò)設(shè)備和計算機可讀介質(zhì)
- 定位方法、裝置及系統(tǒng)
- 網(wǎng)絡(luò)設(shè)備配置方法和裝置
- 一種管理主從網(wǎng)絡(luò)設(shè)備的設(shè)備配置系統(tǒng)及方法
- 一種高效的網(wǎng)絡(luò)設(shè)備管理系統(tǒng)
- 一種網(wǎng)絡(luò)資產(chǎn)標(biāo)識方法及裝置
- 升級網(wǎng)絡(luò)設(shè)備的方法、裝置、存儲介質(zhì)以及電子設(shè)備
- 一種網(wǎng)絡(luò)設(shè)備的定位方法、計算機設(shè)備及介質(zhì)





