[發明專利]一種日志采集的臟數據快速檢測及處理方法在審
| 申請號： | 202210014101.9 | 申請日： | 2022-01-07 |
| 公開（公告）號： | CN114356908A | 公開（公告）日： | 2022-04-15 |
| 發明（設計）人： | 黃詩賢;唐敏;張章學;藍友樞;葉松 | 申請（專利權）人： | 福建省海峽信息技術有限公司 |
| 主分類號： | G06F16/215 | 分類號： | G06F16/215;G06F16/2458;G06F16/28;G06F16/22;G06F9/54 |
| 代理公司： | 福州元創專利商標代理有限公司 35100 | 代理人： | 陳明鑫;蔡學俊 |
| 地址： | 350003 福建省*** | 國省代碼： | 福建;35 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 一種 日志 采集 數據 快速 檢測 處理 方法 | ||
【權利要求書】：
1.一種日志采集的臟數據快速檢測及處理方法，其特征在于，包括如下步驟：
S1、通過網絡采集各種不同網絡設備類型的日志，最終匯聚到消息中間件；
S2、依據解析庫中的解析規則對消息中間件中日志進行解析規則匹配，匹配成功的提取字段，并執行步驟S3；匹配不成功的認為是臟數據，并執行步驟S5；
S3、依據字段分類庫中的字段分類規則對提取的分類字段進行分類；
S4、對分類完的字段，依據其對應的分類值，通過廣度優先遍歷，找到這個分類值的概率，同理找到相應日志下所有字段的分類值的概率，依次對各個字段的分類值的概率進行判斷，只要其中一個字段的分類值的概率大于設置的閾值，就判定為臟數據；
S5、將臟數據存放到臟數據庫中，維護人員根據臟數據庫中臟數據對規則進行重新調整。
2.根據權利要求1所述的一種日志采集的臟數據快速檢測及處理方法，其特征在于，所述段分類規則中字段分類類型是按行進行存儲，所述段分類規則是從根節點開始構建成的分類規則樹，每個葉子節點由相應字段的分類值即數字代碼與對應的概率值構成。
下載完整專利技術內容需要扣除積分，VIP會員可以免費下載。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于福建省海峽信息技術有限公司，未經福建省海峽信息技術有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202210014101.9/1.html，轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
