[發(fā)明專利]用于處理日志的方法及其系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201210467081.7
• 申請(qǐng)日: 2012-11-19
• 公開（公告）號(hào): CN103823811A
• 公開（公告）日: 2014-05-28
• 發(fā)明（設(shè)計(jì)）人: 宋歡;李鵬;何威;曹曉冬;廖迪青
• 申請(qǐng)（專利權(quán)）人: 北京百度網(wǎng)訊科技有限公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 北京銘碩知識(shí)產(chǎn)權(quán)代理有限公司 11286
• 代理人: 羅延紅

1.一種用于處理日志的方法，包括：

收集步驟：收集由網(wǎng)絡(luò)上的各個(gè)服務(wù)器針對(duì)用戶操作而產(chǎn)生的異構(gòu)日志，其中，基于用戶操作在各個(gè)服務(wù)器上引起的動(dòng)作項(xiàng)目來產(chǎn)生異構(gòu)日志，使得異構(gòu)日志包括指示動(dòng)作項(xiàng)目的項(xiàng)目標(biāo)識(shí)符字段；

格式轉(zhuǎn)換步驟：將收集的異構(gòu)日志轉(zhuǎn)換為具有統(tǒng)一格式的日志，其中，所述統(tǒng)一格式包括項(xiàng)目標(biāo)識(shí)符字段；

組合步驟：通過組合具有統(tǒng)一格式的日志來產(chǎn)生中間日志文件，并將中間日志文件存儲(chǔ)在不同于所述各個(gè)服務(wù)器的中間服務(wù)器上；

統(tǒng)計(jì)步驟：基于指示期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目的項(xiàng)目標(biāo)識(shí)符字段來配置日志規(guī)格文檔，以利用日志規(guī)格文檔從中間日志文件所包括的各個(gè)日志中自動(dòng)統(tǒng)計(jì)期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目。

2.如權(quán)利要求1所述的方法，其中，所述網(wǎng)絡(luò)上的各個(gè)服務(wù)器為前端服務(wù)器或后端服務(wù)器。

3.如權(quán)利要求1所述的方法，其中，所述統(tǒng)一格式還包括以下字段中的至少一個(gè)：用戶標(biāo)識(shí)符字段、日志標(biāo)識(shí)符字段、日志產(chǎn)生時(shí)間字段、日志來源字段、用戶行為描述字段。

4.如權(quán)利要求1所述的方法，其中，格式轉(zhuǎn)換步驟包括：

解析步驟：基于統(tǒng)一格式中的各個(gè)字段來解析收集的異構(gòu)日志；

字段排列步驟：排列解析出的各個(gè)字段，以得到具有統(tǒng)一格式的日志。

5.如權(quán)利要求1所述的方法，其中，日志規(guī)格文檔按照XML來配置，從而以項(xiàng)目標(biāo)識(shí)符為搜索條件來統(tǒng)計(jì)期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目。

6.如權(quán)利要求5所述的方法，其中，搜索條件包括以下字段中的至少一個(gè)與項(xiàng)目標(biāo)識(shí)符的結(jié)合：日志產(chǎn)生時(shí)間字段、日志來源字段、用戶行為描述字段。

7.如權(quán)利要求4所述的方法，其中，解析步驟包括：

提取步驟：基于統(tǒng)一格式中的各個(gè)字段來提取異構(gòu)日志中的字段；

修正步驟：對(duì)提取的字段進(jìn)行修正以與統(tǒng)一格式中的相應(yīng)字段完全一致。

8.如權(quán)利要求4所述的方法，其中，在組合步驟中，特定時(shí)間段內(nèi)產(chǎn)生的具有相同用戶標(biāo)識(shí)符字段、日志標(biāo)識(shí)符字段或相同用戶行為描述字段的日志被合并為一條日志。

9.一種用于處理日志的系統(tǒng)，包括：

收集裝置：收集由網(wǎng)絡(luò)上的各個(gè)服務(wù)器針對(duì)用戶操作而產(chǎn)生的異構(gòu)日志，其中，基于用戶操作在各個(gè)服務(wù)器上引起的動(dòng)作項(xiàng)目來產(chǎn)生異構(gòu)日志，使得異構(gòu)日志包括指示動(dòng)作項(xiàng)目的項(xiàng)目標(biāo)識(shí)符字段；

格式轉(zhuǎn)換裝置：將收集的異構(gòu)日志轉(zhuǎn)換為具有統(tǒng)一格式的日志，其中，所述統(tǒng)一格式包括項(xiàng)目標(biāo)識(shí)符字段；

組合裝置：通過組合具有統(tǒng)一格式的日志來產(chǎn)生中間日志文件，并將中間日志文件存儲(chǔ)在不同于所述各個(gè)服務(wù)器的中間服務(wù)器上；

統(tǒng)計(jì)裝置：基于指示期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目的項(xiàng)目標(biāo)識(shí)符字段來配置日志規(guī)格文檔，以利用日志規(guī)格文檔從中間日志文件所包括的各個(gè)日志中自動(dòng)統(tǒng)計(jì)期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目。

10.如權(quán)利要求9所述的系統(tǒng)，其中，格式轉(zhuǎn)換裝置包括：

解析裝置：基于統(tǒng)一格式中的各個(gè)字段來解析收集的異構(gòu)日志；

字段排列裝置：排列解析出的各個(gè)字段，以得到具有統(tǒng)一格式的日志。

11.如權(quán)利要求10所述的系統(tǒng)，其中，解析裝置包括：

提取裝置：基于統(tǒng)一格式中的各個(gè)字段來提取異構(gòu)日志中的字段；

修正裝置：對(duì)提取的字段進(jìn)行修正以與統(tǒng)一格式中的相應(yīng)字段完全一致。

12.一種用于處理日志的方法，包括：

收集步驟：收集由網(wǎng)絡(luò)上的各個(gè)服務(wù)器針對(duì)用戶操作而產(chǎn)生的具有統(tǒng)一格式的日志，其中，基于用戶操作在各個(gè)服務(wù)器上引起的動(dòng)作項(xiàng)目來產(chǎn)生所述日志，使得所述日志包括指示動(dòng)作項(xiàng)目的項(xiàng)目標(biāo)識(shí)符字段；

組合步驟：通過組合所述日志來產(chǎn)生中間日志文件，并將中間日志文件存儲(chǔ)在不同于所述各個(gè)服務(wù)器的中間服務(wù)器上；

統(tǒng)計(jì)步驟：基于指示期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目的項(xiàng)目標(biāo)識(shí)符字段來配置日志規(guī)格文檔，以利用日志規(guī)格文檔從中間日志文件所包括的各個(gè)日志中自動(dòng)統(tǒng)計(jì)期望統(tǒng)計(jì)的動(dòng)作項(xiàng)目。

13.如權(quán)利要求12所述的方法，其中，所述網(wǎng)絡(luò)上的各個(gè)服務(wù)器為前端服務(wù)器或后端服務(wù)器。

14.如權(quán)利要求12所述的方法，其中，所述統(tǒng)一格式還包括以下字段中的至少一個(gè)：用戶標(biāo)識(shí)符字段、日志標(biāo)識(shí)符字段、日志產(chǎn)生時(shí)間字段、日志來源字段、用戶行為描述字段。