[發明專利]一種日志數據處理方法及裝置有效
| 申請號: | 201710680824.1 | 申請日: | 2017-08-10 |
| 公開(公告)號: | CN107688619B | 公開(公告)日: | 2020-06-16 |
| 發明(設計)人: | 白敏;高浩浩 | 申請(專利權)人: | 奇安信科技集團股份有限公司;網神信息技術(北京)股份有限公司 |
| 主分類號: | G06F16/17 | 分類號: | G06F16/17;G06K9/62 |
| 代理公司: | 北京路浩知識產權代理有限公司 11002 | 代理人: | 王瑩;李官 |
| 地址: | 100088 北京市西城區*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 日志 數據處理 方法 裝置 | ||
1.一種日志數據處理方法,其特征在于,包括:
實時獲取被監測會話對應的被監測日志數據,對所述被監測日志數據進行解析,獲得時間戳;
將所述時間戳進行格式轉換,獲得預設格式的轉換后時間戳;
若判斷獲知所述轉換后時間戳與所述被監測會話的會話開始時間不在同一天,則對所述轉換后時間戳進行修正,獲得修正后時間戳;
若判斷獲知所述修正后時間戳為所述被監測會話的會話結束時間,則根據所述會話開始時間和所述會話結束時間進行聚類分析,獲得分析結果;
其中,所述若判斷獲知所述轉換后時間戳與所述被監測會話的會話開始時間不在同一天,則對所述轉換后時間戳進行修正,獲得修正后時間戳,包括:
若判斷所述轉換后時間戳與所述被監測會話的會話開始時間不在同一天,則獲取轉換后時間戳與所述會話開始時間的日期間隔;
根據所述日期間隔對所述轉換后時間戳進行修正,獲得修正后時間戳;
其中,所述根據所述日期間隔對所述轉換后時間戳進行修正,獲得修正后時間戳,包括:
若所述轉換后時間戳與所述開始時間的日期間隔為n,則修正后時間戳的小時數=轉換后時間戳的小時數+n×24;
所述修正后時間戳的天數=所述轉換后時間戳的天數-n,其中,n為整數。
2.根據權利要求1所述的方法,其特征在于,所述方法,還包括:
將預設格式的轉換后時間戳轉換成十進制格式。
3.根據權利要求1或2所述的方法,其特征在于,所述方法,還包括:
獲取預設時間段內,被監測用戶對應的所有會話集樣本,所述會話集樣本包括樣本會話開始時間和樣本會話結束時間;
根據所述會話集樣本的樣本會話開始時間和樣本會話結束時間,利用Kmeans算法建立聚類模型,并提取出聚合中心點。
4.根據權利要求3所述的方法,其特征在于,所述根據所述會話開始時間和所述會話結束時間進行聚類分析,獲得分析結果,包括:
將所述會話開始時間和所述會話結束時間輸入到所述聚類模型中,計算所述被監測會話與所述聚合中心點的偏離值;
根據所述偏離值判斷所述被監測會話是否異常。
5.一種日志數據處理裝置,其特征在于,包括:
第一獲取模塊,用于實時獲取被監測會話對應的被監測日志數據,對所述被監測日志數據進行解析,獲得時間戳;
第一轉換模塊,用于將所述時間戳進行格式轉換,獲得預設格式的轉換后時間戳;
修正模塊,用于若判斷獲知所述轉換后時間戳與所述被監測會話的會話開始時間不在同一天,則對所述轉換后時間戳進行修正,獲得修正后時間戳;
分析模塊,用于若判斷獲知所述修正后時間戳為所述被監測會話的會話結束時間,則根據所述會話開始時間和所述會話結束時間進行聚類分析,獲得分析結果;
其中,所述修正模塊,具體用于:
若判斷所述轉換后時間戳與所述被監測會話的會話開始時間不在同一天,則獲取轉換后時間戳與所述會話開始時間的日期間隔;
根據所述日期間隔對所述轉換后時間戳進行修正,獲得修正后時間戳;
其中,所述修正模塊,具體用于:
若所述轉換后時間戳與所述開始時間的日期間隔為n,則修正后時間戳的小時數=轉換后時間戳的小時數+n×24;
所述修正后時間戳的天數=所述轉換后時間戳的天數-n,其中,n為整數。
6.根據權利要求5所述的裝置,其特征在于,所述裝置,還包括:
第二轉換模塊,用于將預設格式的轉換后時間戳轉換成十進制格式。
7.根據權利要求5或6所述的裝置,其特征在于,所述裝置,還包括:
第二獲取模塊,用于獲取預設時間段內,被監測用戶對應的所有會話集樣本,所述會話集樣本包括樣本會話開始時間和樣本會話結束時間;
模型建立模塊,用于根據所述會話集樣本的樣本會話開始時間和樣本會話結束時間,利用Kmeans算法建立聚類模型,并提取出聚合中心點。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于奇安信科技集團股份有限公司;網神信息技術(北京)股份有限公司,未經奇安信科技集團股份有限公司;網神信息技術(北京)股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710680824.1/1.html,轉載請聲明來源鉆瓜專利網。





