[發明專利]一種日志質量評估方法、裝置、服務器以及存儲介質在審
| 申請號: | 201711420458.2 | 申請日: | 2017-12-25 |
| 公開(公告)號: | CN108121645A | 公開(公告)日: | 2018-06-05 |
| 發明(設計)人: | 林偉平 | 申請(專利權)人: | 深圳市分期樂網絡科技有限公司 |
| 主分類號: | G06F11/34 | 分類號: | G06F11/34;G06F17/30 |
| 代理公司: | 北京品源專利代理有限公司 11332 | 代理人: | 孟金喆 |
| 地址: | 518000 廣東省深圳市南山區粵海*** | 國省代碼: | 廣東;44 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 日志數據 目標文件 質量評估 采集 預設時間間隔 存儲介質 屬性信息 原始屬性 日志 服務器 誤差率 后續數據處理 數據采集過程 事件發生時 發生事件 記錄目標 實時采集 系統開發 系統維護 用戶數據 有效檢測 最終結果 挖掘 記錄 | ||
1.一種日志質量評估方法,其特征在于,包括:
在監聽到目標文件中有事件發生時,實時采集與所述目標文件相對應的日志數據,并按照預設時間間隔周期的記錄在所述預設時間間隔內所采集的日志數據的采集屬性信息;
記錄所述目標文件中已發生事件的原始屬性信息;
根據所述原始屬性信息以及所述目標文件的各采集屬性信息確定采集誤差率,以對所述目標文件的日志數據進行質量評估。
2.根據權利要求1所述的方法,其特征在于,所述實時采集與所述目標文件相對應的日志數據,包括:
按照逐行采集的方式實時采集與所述目標文件相對應的日志數據。
3.根據權利要求2所述的方法,其特征在于,所述記錄所述目標文件中已發生事件的原始屬性信息,包括:
記錄所述目標文件中已發生事件的行數信息作為目標行數;
相應的,根據所述原始屬性信息以及所述目標文件的各采集屬性信息確定采集誤差率,包括:
在所述目標文件的各采集屬性信息所包含的文件標識信息與目標標識信息相對應時,根據所述目標文件的各采集屬性信息確定日志采集總行數;
根據公式η=(1-m/n)×100%確定所述目標文件的日志數據的采集誤差率;其中,m為所述日志采集總行數,n為所述目標行數,η為所述采集誤差率。
4.根據權利要求1任一項所述的方法,其特征在于,在實時采集與所述目標文件相對應的日志數據時,還包括:
根據當前已采集日志數據的采集時間信息以及采集行數信息確定當前日志采集速率;
如果所述當前日志采集速率大于限制采集速率,按照所述限制采集速率采集與所述目標文件相對應的日志數據。
5.根據權利要求1-4任一項所述的方法,其特征在于,在所述實時采集與所述目標文件相對應的日志數據之前,還包括:
根據預設的文件路徑信息,確定待監聽的目標文件。
6.一種日志質量評估裝置,其特征在于,包括:
第一記錄模塊,用于在監聽到目標文件中有事件發生時,實時采集與所述目標文件相對應的日志數據,并按照預設時間間隔周期的記錄在所述預設時間間隔內所采集的日志數據的采集屬性信息;
第二記錄模塊,用于記錄所述目標文件中已發生事件的原始屬性信息;
質量評估模塊,用于根據所述原始屬性信息以及所述目標文件的各采集屬性信息確定采集誤差率,以對所述目標文件的日志數據進行質量評估。
7.根據權利要求6所述的裝置,其特征在于,所述第一記錄模塊,包括:
采集單元,用于按照逐行采集的方式實時采集與所述目標文件相對應的日志數據。
8.根據權利要求7所述的裝置,其特征在于,所述第二記錄模塊,包括:
記錄單元,用于記錄所述目標文件中已發生事件的行數信息作為目標行數;
相應的,質量評估模塊,具體用于:
在所述目標文件的各采集屬性信息所包含的文件標識信息與目標標識信息相對應時,根據所述目標文件的各采集屬性信息確定日志采集總行數;
根據公式η=(1-m/n)×100%確定所述目標文件的日志數據的采集誤差率;其中,m為所述日志采集總行數,n為所述目標行數,η為所述采集誤差率。
9.一種服務器,包括輸入裝置,其特征在于,還包括:
一個或多個處理器;
存儲裝置,用于存儲一個或多個程序;
所述一個或多個程序被所述一個或多個處理器執行,使用所述一個或多個處理器實現如權利要求1-5任一項所述的日志質量評估方法。
10.一種計算機可讀存儲介質,其上存儲有計算機程序,其特征在于,該程序被處理器執行時實現如權利要求1-5任一項所述的日志質量評估方法。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于深圳市分期樂網絡科技有限公司,未經深圳市分期樂網絡科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201711420458.2/1.html,轉載請聲明來源鉆瓜專利網。





