[發(fā)明專利]用于數(shù)據(jù)倉庫的日志分析方法和裝置有效
| 申請?zhí)枺?/td> | 201410305348.1 | 申請日: | 2014-06-30 |
| 公開(公告)號: | CN104036034A | 公開(公告)日: | 2014-09-10 |
| 發(fā)明(設(shè)計)人: | 韓杰嬌 | 申請(專利權(quán))人: | 百度在線網(wǎng)絡(luò)技術(shù)(北京)有限公司 |
| 主分類號: | G06F17/30 | 分類號: | G06F17/30;G06F11/34 |
| 代理公司: | 北京品源專利代理有限公司 11332 | 代理人: | 胡彬;鄧猛烈 |
| 地址: | 100085 北京市*** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 用于 數(shù)據(jù)倉庫 日志 分析 方法 裝置 | ||
1.一種用于數(shù)據(jù)倉庫的日志分析方法,其特征在于,包括:
生成記錄日志之間的依賴關(guān)系的元數(shù)據(jù);
根據(jù)所述元數(shù)據(jù)對日志是否異常進行檢查;
若檢查出異常的日志,向用戶提示所述日志的異常,和/或修改異常的日志。
2.根據(jù)權(quán)利要求1所述的方法,其特征在于,所述元數(shù)據(jù)用于記錄下游日志對上游日志的依賴關(guān)系。
3.根據(jù)權(quán)利要求1所述的方法,其特征在于,根據(jù)所述元數(shù)據(jù)對日志是否異常進行檢查包括:
讀取所述元數(shù)據(jù)記錄的日志之間的依賴關(guān)系;
根據(jù)所述日志之間的依賴關(guān)系,對日志進行血統(tǒng)分析。
4.根據(jù)權(quán)利要求3所述的方法,其特征在于,根據(jù)所述日志之間的依賴關(guān)系,對日志進行血統(tǒng)分析包括:
根據(jù)所述日志之間的依賴關(guān)系,并依據(jù)系統(tǒng)上線時間,檢查所述依賴關(guān)系中上游日志與下游日志的數(shù)據(jù)一致性。
5.根據(jù)權(quán)利要求1所述的方法,其特征在于,在根據(jù)所述元數(shù)據(jù)對日志是否異常進行檢查之前,還包括:
根據(jù)預(yù)先定義的日志規(guī)范對日志的格式規(guī)范性進行檢查。
6.根據(jù)權(quán)利要求5所述的方法,其特征在于,根據(jù)預(yù)先定義的日志規(guī)范對日志的格式規(guī)范性進行檢查包括:
根據(jù)預(yù)先定義的日志規(guī)范對日志是否重復(fù)記錄、日志的記錄頻率以及日志的記錄時機進行檢查。
7.根據(jù)權(quán)利要求1所述的方法,其特征在于,在生成記錄日志之間的依賴關(guān)系的元數(shù)據(jù)之前,還包括:
將日志進行規(guī)范化處理,并將經(jīng)過規(guī)范化處理的日志存入數(shù)據(jù)庫。
8.一種用于數(shù)據(jù)倉庫的日志分析裝置,其特征在于,包括:
元數(shù)據(jù)生成模塊,用于生成記錄日志之間的依賴關(guān)系的元數(shù)據(jù);
第一日志檢查模塊,用于根據(jù)所述元數(shù)據(jù)對日志是否異常進行檢查;
提示修改模塊,用于若檢查出異常的日志,向用戶提示所述日志的異常,和/或修改異常的日志。
9.根據(jù)權(quán)利要求8所述的裝置,其特征在于,所述元數(shù)據(jù)用于記錄下游日志對上游日志的依賴關(guān)系。
10.根據(jù)權(quán)利要求8所述的裝置,其特征在于,所述第一日志檢查模塊包括:
元數(shù)據(jù)讀取單元,用于讀取所述元數(shù)據(jù)記錄的日志之間的依賴關(guān)系;
血統(tǒng)分析單元,用于根據(jù)所述日志之間的依賴關(guān)系,對日志進行血統(tǒng)分析。
11.根據(jù)權(quán)利要求10所述的裝置,其特征在于,所述血統(tǒng)分析單元具體用于:
根據(jù)所述日志之間的依賴關(guān)系,并依據(jù)系統(tǒng)上線時間,檢查所述依賴關(guān)系中上游日志與下游日志的數(shù)據(jù)一致性。
12.根據(jù)權(quán)利要求8所述的裝置,其特征在于,還包括:
第二日志檢查模塊,用于在根據(jù)所述元數(shù)據(jù)對日志是否異常進行檢查之前,根據(jù)預(yù)先定義的日志規(guī)范對日志的格式規(guī)范性進行檢查。
13.根據(jù)權(quán)利要求12所述的裝置,其特征在于,所述第二日志檢查模塊具體用于:
根據(jù)預(yù)先定義的日志規(guī)范對日志是否重復(fù)記錄、日志的記錄頻率以及日志的記錄時機進行檢查。
14.根據(jù)權(quán)利要求8所述的裝置,其特征在于,還包括:
日志入庫模塊,用于在生成記錄日志之間的依賴關(guān)系的元數(shù)據(jù)之前,將日志進行規(guī)范化處理,并將經(jīng)過規(guī)范化處理的日志存入數(shù)據(jù)庫。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于百度在線網(wǎng)絡(luò)技術(shù)(北京)有限公司,未經(jīng)百度在線網(wǎng)絡(luò)技術(shù)(北京)有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201410305348.1/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 上一篇:脫水機電動機的電氣控制回路及控制方法
- 下一篇:曲軸毛坯的檢驗裝置
- 用于進行數(shù)據(jù)倉儲的設(shè)備和方法
- 用于進行數(shù)據(jù)倉儲的系統(tǒng)和方法
- 同步構(gòu)建業(yè)務(wù)模型和數(shù)據(jù)倉庫模型及其映射的方法及系統(tǒng)
- 一種構(gòu)建數(shù)據(jù)倉庫表血緣關(guān)系圖的方法和裝置
- 一種數(shù)據(jù)倉庫性能測試方法及系統(tǒng)
- 一種老年健康監(jiān)護系統(tǒng)用數(shù)據(jù)及資源存儲層
- 數(shù)據(jù)模型生成方法和數(shù)據(jù)倉庫生成方法、裝置及電子設(shè)備
- 一種解耦合的彈性數(shù)據(jù)倉庫架構(gòu)
- 數(shù)據(jù)同步方法、裝置、存儲介質(zhì)和計算機設(shè)備
- 一種數(shù)據(jù)倉庫管理方法及系統(tǒng)





