[發(fā)明專利]時序數(shù)據(jù)異常檢測方法、裝置、計算機設(shè)備和存儲介質(zhì)有效
| 申請?zhí)枺?/td> | 201910243107.1 | 申請日: | 2019-03-28 |
| 公開(公告)號: | CN109978379B | 公開(公告)日: | 2021-08-24 |
| 發(fā)明(設(shè)計)人: | 鄒勇杰;陳宇;王博;陳云 | 申請(專利權(quán))人: | 北京百度網(wǎng)訊科技有限公司 |
| 主分類號: | G06Q10/06 | 分類號: | G06Q10/06;G06F16/2458;G06F17/16;G06F17/18 |
| 代理公司: | 北京清亦華知識產(chǎn)權(quán)代理事務所(普通合伙) 11201 | 代理人: | 宋合成 |
| 地址: | 100085 北京市*** | 國省代碼: | 北京;11 |
| 權(quán)利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 時序 數(shù)據(jù) 異常 檢測 方法 裝置 計算機 設(shè)備 存儲 介質(zhì) | ||
1.一種時序數(shù)據(jù)異常檢測方法,其特征在于,包括:
從待檢測的指標數(shù)據(jù)中采集距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù);
利用預先訓練的變分自編碼器對所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)進行解碼、編碼處理,確定所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量,其中,所述均值向量中的元素值是所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)的預測值;
根據(jù)所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量及所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù),確定所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的異常得分;
根據(jù)所述異常得分與預設(shè)閾值的關(guān)系,確定所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)是否異常。
2.如權(quán)利要求1所述的方法,其特征在于,所述利用預先訓練的變分自編碼器對所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)進行解碼、編碼處理之前,還包括:
對所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)進行標準化及缺失點填充處理。
3.如權(quán)利要求1所述的方法,其特征在于,所述確定所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的異常得分,包括:
根據(jù)所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量,計算所述距離當前時刻第一預設(shè)時間長度內(nèi)每個指標數(shù)據(jù)的偏差值;
根據(jù)所述距離當前時刻第一預設(shè)時間長度內(nèi)每個指標數(shù)據(jù)的偏差值及所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量,確定所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的異常得分。
4.如權(quán)利要求1所述的方法,其特征在于,所述確定所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量之后,還包括:
根據(jù)所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量,計算所述距離當前時刻第二預設(shè)時間長度內(nèi)每個指標數(shù)據(jù)的偏差值,其中,所述第二預設(shè)時間長度小于所述第一預設(shè)時間長度;
根據(jù)所述距離當前時刻第二預設(shè)時間長度內(nèi)每個指標數(shù)據(jù)的偏差值及所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的均值向量,確定所述距離當前時刻第二預設(shè)時間長度內(nèi)的指標數(shù)據(jù)對應的異常得分。
5.如權(quán)利要求1-4任一所述的方法,其特征在于,所述利用預先訓練的變分自編碼器對所述距離當前時刻第一預設(shè)時間長度內(nèi)的指標數(shù)據(jù)進行解碼、編碼處理之前,還包括:
獲取所述待檢測的指標的歷史數(shù)據(jù);
對所述歷史數(shù)據(jù)進行預處理,生成訓練樣本數(shù)據(jù);
利用所述訓練樣本數(shù)據(jù)對初始變分自編碼器進行訓練,生成訓練后的變分自編碼器。
6.如權(quán)利要求5所述的方法,其特征在于,所述對所述歷史數(shù)據(jù)進行預處理,生成訓練樣本數(shù)據(jù),包括:
根據(jù)所述待檢測的指標的時序特性,將所述歷史數(shù)據(jù)進行分割、聚類處理,得到多個數(shù)據(jù)簇;
根據(jù)多個數(shù)據(jù)簇中包含的數(shù)據(jù)組數(shù)量,從所述多個數(shù)據(jù)簇中獲取訓練正樣本數(shù)據(jù)。
7.如權(quán)利要求6所述的方法,其特征在于,所述從所述多個數(shù)據(jù)簇中獲取訓練正樣本數(shù)據(jù)之后,還包括:
根據(jù)所述訓練正樣本數(shù)據(jù)中的數(shù)據(jù)量,在所述訓練正樣本數(shù)據(jù)中隨機插入異常數(shù)據(jù)。
8.如權(quán)利要求6或7任一所述的方法,其特征在于,所述對所述歷史數(shù)據(jù)進行預處理,生成訓練樣本數(shù)據(jù),包括:
根據(jù)所述待檢測的指標的歷史數(shù)據(jù)對應的采集模式,確定所述歷史數(shù)據(jù)中的數(shù)據(jù)缺失點及缺失點注入概率;
將所述歷史數(shù)據(jù)中的數(shù)據(jù)缺失點,用預設(shè)的數(shù)值填充;
根據(jù)所述缺失點注入概率及缺失點填充后的歷史數(shù)據(jù)中包含的數(shù)據(jù)點數(shù)量,將缺失點填充后的歷史數(shù)據(jù)中的部分數(shù)據(jù)點用預設(shè)的數(shù)值替換,生成訓練數(shù)據(jù);
將所述訓練數(shù)據(jù)進行數(shù)據(jù)分割,生成所述訓練樣本數(shù)據(jù)。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于北京百度網(wǎng)訊科技有限公司,未經(jīng)北京百度網(wǎng)訊科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作,請聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910243107.1/1.html,轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
- 同類專利
- 專利分類
G06Q 專門適用于行政、商業(yè)、金融、管理、監(jiān)督或預測目的的數(shù)據(jù)處理系統(tǒng)或方法;其他類目不包含的專門適用于行政、商業(yè)、金融、管理、監(jiān)督或預測目的的處理系統(tǒng)或方法
G06Q10-00 行政;管理
G06Q10-02 .預定,例如用于門票、服務或事件的
G06Q10-04 .預測或優(yōu)化,例如線性規(guī)劃、“旅行商問題”或“下料問題”
G06Q10-06 .資源、工作流、人員或項目管理,例如組織、規(guī)劃、調(diào)度或分配時間、人員或機器資源;企業(yè)規(guī)劃;組織模型
G06Q10-08 .物流,例如倉儲、裝貨、配送或運輸;存貨或庫存管理,例如訂貨、采購或平衡訂單
G06Q10-10 .辦公自動化,例如電子郵件或群件的計算機輔助管理
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法、數(shù)據(jù)系統(tǒng)、接收設(shè)備和數(shù)據(jù)讀取方法
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置、數(shù)據(jù)記錄媒體、數(shù)據(jù)重播方法和數(shù)據(jù)重播裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)發(fā)送系統(tǒng)、數(shù)據(jù)發(fā)送裝置以及數(shù)據(jù)結(jié)構(gòu)
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法及數(shù)據(jù)系統(tǒng)
- 數(shù)據(jù)嵌入裝置、數(shù)據(jù)嵌入方法、數(shù)據(jù)提取裝置及數(shù)據(jù)提取方法
- 數(shù)據(jù)管理裝置、數(shù)據(jù)編輯裝置、數(shù)據(jù)閱覽裝置、數(shù)據(jù)管理方法、數(shù)據(jù)編輯方法以及數(shù)據(jù)閱覽方法
- 數(shù)據(jù)發(fā)送和數(shù)據(jù)接收設(shè)備、數(shù)據(jù)發(fā)送和數(shù)據(jù)接收方法
- 數(shù)據(jù)發(fā)送裝置、數(shù)據(jù)接收裝置、數(shù)據(jù)收發(fā)系統(tǒng)、數(shù)據(jù)發(fā)送方法、數(shù)據(jù)接收方法和數(shù)據(jù)收發(fā)方法
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置





