[發(fā)明專利]一種日志處理方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201310014284.5
• 申請(qǐng)日: 2013-01-15
• 公開（公告）號(hào): CN103929321A
• 公開（公告）日: 2014-07-16
• 發(fā)明（設(shè)計(jì)）人: 程剛;蘆方
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): H04L12/24
• 分類號(hào): H04L12/24
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 羅振安

1.一種日志處理方法，其特征在于，所述方法包括：

獲取預(yù)設(shè)的格式配置文件；所述格式配置文件中包括日志格式配置要求；

判斷接收到的日志是否滿足所述日志格式配置要求；

當(dāng)所述日志滿足所述日志格式配置要求時(shí)，根據(jù)所述日志格式配置要求解析所述日志的字段值。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)所述日志格式配置要求解析所述日志的字段值之后，還包括：

對(duì)解析的所述日志的字段值進(jìn)行過濾，去掉無效的字段值；

根據(jù)所述日志過濾后的字段值查找是否存在相關(guān)日志，并判斷所述日志是否需要與所述相關(guān)日志合并；

如果需要合并，則將所述日志與相關(guān)日志進(jìn)行合并，并將所述日志解析的字段值存儲(chǔ)在所述相關(guān)日志對(duì)應(yīng)的目錄下或者轉(zhuǎn)發(fā)；

如果不需要合并，則將所述日志解析的字段值進(jìn)行存儲(chǔ)或者轉(zhuǎn)發(fā)。

3.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述獲取預(yù)設(shè)的格式配置文件之前，包括：

配置所述格式配置文件，所述格式配置文件中的日志格式配置要求具體包括輸入格式配置要求和輸出格式配置要求。

4.根據(jù)權(quán)利要求1或3所述的方法，其特征在于，所述根據(jù)所述日志格式配置要求解析所述日志的字段值，包括：

當(dāng)接收到的所述日志滿足所述輸入格式配置要求時(shí)，判斷所述日志的字段模式為固定序模式還是鍵值對(duì)KV模式；

當(dāng)所述日志的字段模式是所述固定序模式時(shí)，根據(jù)所述固定序模式規(guī)則解析所述日志的字段值；

當(dāng)所述日志的字段模式是所述KV模式時(shí)，根據(jù)所述KV模式規(guī)則解析所述日志的字段值。

5.根據(jù)權(quán)利要求2或3所述的方法，其特征在于，判斷所述日志是否需要與相關(guān)日志合并之后，還包括：

當(dāng)所述日志與相關(guān)日志需要合并時(shí)，則將所述日志與相關(guān)日志進(jìn)行合并后，將所述日志解析的字段值根據(jù)所述輸出格式配置要求配置后，存儲(chǔ)在所述相關(guān)日志對(duì)應(yīng)的目錄下或者轉(zhuǎn)發(fā)；

當(dāng)所述日志與相關(guān)日志不需要合并時(shí)，則將所述日志解析的字段值根據(jù)所述輸出格式配置要求配置后，進(jìn)行存儲(chǔ)或者轉(zhuǎn)發(fā)。

6.一種日志處理裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取預(yù)設(shè)的格式配置文件；所述格式配置文件中包括日志格式配置要求；

判斷模塊，用于判斷接收到的日志是否滿足所述日志格式配置要求；

解析模塊，用于當(dāng)所述日志滿足所述日志格式配置要求時(shí)，根據(jù)所述日志格式配置要求解析所述日志的字段值。

7.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述裝置還包括：

過濾模塊，用于根據(jù)所述日志格式配置要求解析所述日志的字段值之后，對(duì)解析的所述日志的字段值進(jìn)行過濾，去掉無效的字段值；

合并模塊，用于根據(jù)所述日志過濾后的字段值查找是否存在相關(guān)日志，并判斷所述日志是否需要與所述相關(guān)日志合并；如果需要合并，則將所述日志與相關(guān)日志進(jìn)行合并，并將所述日志解析的字段值存儲(chǔ)在所述相關(guān)日志對(duì)應(yīng)的目錄下或者轉(zhuǎn)發(fā)；如果不需要合并，則將所述日志解析的字段值進(jìn)行存儲(chǔ)或者轉(zhuǎn)發(fā)。

8.根據(jù)權(quán)利要求6所述的裝置，其特征在于，所述裝置包括：

配置模塊，用于獲取預(yù)設(shè)的格式配置文件之前，配置所述格式配置文件，所述格式配置文件中的日志格式配置要求具體包括輸入格式配置要求和輸出格式配置要求。

9.根據(jù)權(quán)利要求6或8所述的裝置，其特征在于，所述解析模塊，包括：

判斷單元，用于當(dāng)接收到的所述日志滿足所述輸入格式配置要求時(shí)，判斷所述日志的字段模式為固定序模式還是鍵值對(duì)KV模式；

第一解析單元，用于當(dāng)所述日志的字段模式是所述固定序模式時(shí)，根據(jù)所述固定序模式規(guī)則解析所述日志的字段值；

第二解析單元，用于當(dāng)所述日志的字段模式是所述KV模式時(shí)，根據(jù)所述KV模式規(guī)則解析所述日志的字段值。

10.根據(jù)權(quán)利要求7或8所述的裝置，其特征在于，所述合并模塊還包括：

第一輸出單元，用于判斷所述日志是否需要與相關(guān)日志合并之后，當(dāng)所述日志與相關(guān)日志需要合并時(shí)，則將所述日志與相關(guān)日志進(jìn)行合并后，將所述日志解析的字段值根據(jù)所述輸出格式配置要求配置后，存儲(chǔ)在所述相關(guān)日志對(duì)應(yīng)的目錄下或者轉(zhuǎn)發(fā)；

第二輸出單元，用于當(dāng)所述日志與相關(guān)日志不需要合并時(shí)，則將所述日志解析的字段值根據(jù)所述輸出格式配置要求配置后，進(jìn)行存儲(chǔ)或者轉(zhuǎn)發(fā)。