[發(fā)明專(zhuān)利]時(shí)序數(shù)據(jù)異常檢測(cè)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)有效
| 申請(qǐng)?zhí)枺?/td> | 201910243107.1 | 申請(qǐng)日: | 2019-03-28 |
| 公開(kāi)(公告)號(hào): | CN109978379B | 公開(kāi)(公告)日: | 2021-08-24 |
| 發(fā)明(設(shè)計(jì))人: | 鄒勇杰;陳宇;王博;陳云 | 申請(qǐng)(專(zhuān)利權(quán))人: | 北京百度網(wǎng)訊科技有限公司 |
| 主分類(lèi)號(hào): | G06Q10/06 | 分類(lèi)號(hào): | G06Q10/06;G06F16/2458;G06F17/16;G06F17/18 |
| 代理公司: | 北京清亦華知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11201 | 代理人: | 宋合成 |
| 地址: | 100085 北京市*** | 國(guó)省代碼: | 北京;11 |
| 權(quán)利要求書(shū): | 查看更多 | 說(shuō)明書(shū): | 查看更多 |
| 摘要: | |||
| 搜索關(guān)鍵詞: | 時(shí)序 數(shù)據(jù) 異常 檢測(cè) 方法 裝置 計(jì)算機(jī) 設(shè)備 存儲(chǔ) 介質(zhì) | ||
本申請(qǐng)?zhí)岢鲆环N時(shí)序數(shù)據(jù)異常檢測(cè)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì),該方法利用預(yù)先訓(xùn)練的變分自編碼器對(duì)從待檢測(cè)的指標(biāo)數(shù)據(jù)中采集的距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)進(jìn)行解碼、編碼處理,確定距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量,根據(jù)距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量及距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù),確定距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的異常得分,根據(jù)異常得分與預(yù)設(shè)閾值的關(guān)系,確定距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)是否異常。由此利用預(yù)先訓(xùn)練的變分自編碼器,對(duì)待檢測(cè)的時(shí)序數(shù)據(jù)進(jìn)行異常檢測(cè),無(wú)需考慮數(shù)據(jù)的周期性和光滑性,適用范圍廣。
技術(shù)領(lǐng)域
本申請(qǐng)涉及數(shù)據(jù)處理技術(shù)領(lǐng)域,尤其涉及一種時(shí)序數(shù)據(jù)異常檢測(cè)方法、裝置、計(jì)算機(jī)設(shè)備和存儲(chǔ)介質(zhì)。
背景技術(shù)
時(shí)序數(shù)據(jù)的異常檢測(cè)的技術(shù)十分重要,它被應(yīng)用在各種各樣的領(lǐng)域。例如,在運(yùn)維領(lǐng)域,對(duì)指標(biāo)數(shù)據(jù)的異常檢測(cè)可以用來(lái)判斷相關(guān)的服務(wù)的運(yùn)行狀況。
目前,針對(duì)周期性很強(qiáng)的指標(biāo),一般采用基于同比的算法,即利用指標(biāo)數(shù)據(jù)的周期性(天,周,年等)對(duì)監(jiān)控指標(biāo)進(jìn)行異常檢測(cè)。針對(duì)周期性不強(qiáng)但比較光滑(無(wú)復(fù)雜非線(xiàn)性關(guān)系)的曲線(xiàn),一般采用基于線(xiàn)性回歸的技術(shù)進(jìn)行擬合并預(yù)測(cè)指標(biāo)數(shù)據(jù),從而進(jìn)行異常檢測(cè)。但是,對(duì)周期性不強(qiáng)、且不光滑(頻繁有大幅度抖動(dòng)、存在復(fù)雜非線(xiàn)性)的時(shí)序數(shù)據(jù)進(jìn)行監(jiān)測(cè)時(shí),基于同比的算法因?yàn)楸O(jiān)控指標(biāo)沒(méi)有周期性而失效,由于監(jiān)控指標(biāo)有復(fù)雜非線(xiàn)性的頻繁波動(dòng)而使得基于線(xiàn)性回歸的算法的擬合和預(yù)測(cè)效果比較差,因而基于線(xiàn)性回歸的算法也不適用這種場(chǎng)景。
發(fā)明內(nèi)容
本申請(qǐng)?zhí)岢鲆环N時(shí)序數(shù)據(jù)異常檢測(cè)方法,用于解決相關(guān)技術(shù)中時(shí)序數(shù)據(jù)異常檢測(cè)方法適用性差的問(wèn)題。
本申請(qǐng)一方面實(shí)施例提出了一種時(shí)序數(shù)據(jù)異常檢測(cè)方法,包括:
從待檢測(cè)的指標(biāo)數(shù)據(jù)中采集距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù);
利用預(yù)先訓(xùn)練的變分自編碼器對(duì)所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)進(jìn)行解碼、編碼處理,確定所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量;
根據(jù)所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量及所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù),確定所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的異常得分;
根據(jù)所述異常得分與預(yù)設(shè)閾值的關(guān)系,確定所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)是否異常。
本申請(qǐng)實(shí)施例的時(shí)序數(shù)據(jù)異常檢測(cè)方法,通過(guò)利用預(yù)先訓(xùn)練的變分自編碼器對(duì)距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)進(jìn)行解密、編碼處理,得到距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量,根據(jù)距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量,確定距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的異常得分,根據(jù)異常得分與預(yù)設(shè)閾值的關(guān)系,確定距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)是否異常,由此利用預(yù)先訓(xùn)練的變分自編碼器,對(duì)待檢測(cè)的時(shí)序數(shù)據(jù)進(jìn)行異常檢測(cè),無(wú)需考慮數(shù)據(jù)的周期性和光滑性,適用范圍廣。
本申請(qǐng)另一方面實(shí)施例提出了一種時(shí)序數(shù)據(jù)異常檢測(cè)裝置,包括:
采集模塊,用于從待檢測(cè)的指標(biāo)數(shù)據(jù)中采集距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù);
第一確定模塊,用于利用預(yù)先訓(xùn)練的變分自編碼器對(duì)所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)進(jìn)行解碼、編碼處理,確定所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量;
第二確定模塊,用于根據(jù)所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的均值向量及所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù),確定所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)對(duì)應(yīng)的異常得分;
第三確定模塊,用于根據(jù)所述異常得分與預(yù)設(shè)閾值的關(guān)系,確定所述距離當(dāng)前時(shí)刻第一預(yù)設(shè)時(shí)間長(zhǎng)度內(nèi)的指標(biāo)數(shù)據(jù)是否異常。
該專(zhuān)利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息,商用須獲得專(zhuān)利權(quán)人授權(quán)。該專(zhuān)利全部權(quán)利屬于北京百度網(wǎng)訊科技有限公司,未經(jīng)北京百度網(wǎng)訊科技有限公司許可,擅自商用是侵權(quán)行為。如果您想購(gòu)買(mǎi)此專(zhuān)利、獲得商業(yè)授權(quán)和技術(shù)合作,請(qǐng)聯(lián)系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910243107.1/2.html,轉(zhuǎn)載請(qǐng)聲明來(lái)源鉆瓜專(zhuān)利網(wǎng)。
- 同類(lèi)專(zhuān)利
- 專(zhuān)利分類(lèi)
G06Q 專(zhuān)門(mén)適用于行政、商業(yè)、金融、管理、監(jiān)督或預(yù)測(cè)目的的數(shù)據(jù)處理系統(tǒng)或方法;其他類(lèi)目不包含的專(zhuān)門(mén)適用于行政、商業(yè)、金融、管理、監(jiān)督或預(yù)測(cè)目的的處理系統(tǒng)或方法
G06Q10-00 行政;管理
G06Q10-02 .預(yù)定,例如用于門(mén)票、服務(wù)或事件的
G06Q10-04 .預(yù)測(cè)或優(yōu)化,例如線(xiàn)性規(guī)劃、“旅行商問(wèn)題”或“下料問(wèn)題”
G06Q10-06 .資源、工作流、人員或項(xiàng)目管理,例如組織、規(guī)劃、調(diào)度或分配時(shí)間、人員或機(jī)器資源;企業(yè)規(guī)劃;組織模型
G06Q10-08 .物流,例如倉(cāng)儲(chǔ)、裝貨、配送或運(yùn)輸;存貨或庫(kù)存管理,例如訂貨、采購(gòu)或平衡訂單
G06Q10-10 .辦公自動(dòng)化,例如電子郵件或群件的計(jì)算機(jī)輔助管理
- 一種LED顯示系統(tǒng)的數(shù)據(jù)通信方法
- 用于顯示器的時(shí)序控制器
- 基于靜態(tài)分析的異步電路時(shí)序檢查方法
- 時(shí)序信號(hào)生成方法、裝置、邏輯電路板及存儲(chǔ)介質(zhì)
- 一種視頻的時(shí)序動(dòng)作檢測(cè)方法、裝置、設(shè)備及存儲(chǔ)介質(zhì)
- 調(diào)整時(shí)序的方法、裝置、計(jì)算機(jī)設(shè)備及介質(zhì)
- 一種時(shí)序分析方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)
- 基于人工智能的數(shù)據(jù)檢測(cè)方法、裝置、服務(wù)器及存儲(chǔ)介質(zhì)
- 一種時(shí)序電路優(yōu)化方法、裝置及其存儲(chǔ)介質(zhì)
- 一種基于分布式的靜態(tài)時(shí)序分析方法
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法、數(shù)據(jù)系統(tǒng)、接收設(shè)備和數(shù)據(jù)讀取方法
- 數(shù)據(jù)記錄方法、數(shù)據(jù)記錄裝置、數(shù)據(jù)記錄媒體、數(shù)據(jù)重播方法和數(shù)據(jù)重播裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)發(fā)送系統(tǒng)、數(shù)據(jù)發(fā)送裝置以及數(shù)據(jù)結(jié)構(gòu)
- 數(shù)據(jù)顯示系統(tǒng)、數(shù)據(jù)中繼設(shè)備、數(shù)據(jù)中繼方法及數(shù)據(jù)系統(tǒng)
- 數(shù)據(jù)嵌入裝置、數(shù)據(jù)嵌入方法、數(shù)據(jù)提取裝置及數(shù)據(jù)提取方法
- 數(shù)據(jù)管理裝置、數(shù)據(jù)編輯裝置、數(shù)據(jù)閱覽裝置、數(shù)據(jù)管理方法、數(shù)據(jù)編輯方法以及數(shù)據(jù)閱覽方法
- 數(shù)據(jù)發(fā)送和數(shù)據(jù)接收設(shè)備、數(shù)據(jù)發(fā)送和數(shù)據(jù)接收方法
- 數(shù)據(jù)發(fā)送裝置、數(shù)據(jù)接收裝置、數(shù)據(jù)收發(fā)系統(tǒng)、數(shù)據(jù)發(fā)送方法、數(shù)據(jù)接收方法和數(shù)據(jù)收發(fā)方法
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 數(shù)據(jù)發(fā)送方法、數(shù)據(jù)再現(xiàn)方法、數(shù)據(jù)發(fā)送裝置及數(shù)據(jù)再現(xiàn)裝置
- 異常檢測(cè)裝置、異常檢測(cè)方法
- 異常檢測(cè)方法、異常檢測(cè)裝置及異常檢測(cè)系統(tǒng)
- 異常檢測(cè)裝置、異常檢測(cè)方法以及異常檢測(cè)系統(tǒng)
- 異常檢測(cè)裝置、異常檢測(cè)方法以及異常檢測(cè)系統(tǒng)
- 異常檢測(cè)裝置、異常檢測(cè)方法及異常檢測(cè)系統(tǒng)
- 異常探測(cè)裝置、異常探測(cè)方法以及計(jì)算機(jī)可讀取的存儲(chǔ)介質(zhì)
- 異常檢測(cè)裝置、異常檢測(cè)方法及記錄介質(zhì)
- 異常檢測(cè)裝置、異常檢測(cè)系統(tǒng)以及異常檢測(cè)方法
- 異常檢測(cè)系統(tǒng)、異常檢測(cè)裝置和異常檢測(cè)方法
- 異常檢測(cè)方法、異常檢測(cè)裝置及異常檢測(cè)系統(tǒng)
- 檢測(cè)裝置、檢測(cè)方法和檢測(cè)組件
- 檢測(cè)方法、檢測(cè)裝置和檢測(cè)系統(tǒng)
- 檢測(cè)裝置、檢測(cè)方法以及記錄介質(zhì)
- 檢測(cè)設(shè)備、檢測(cè)系統(tǒng)和檢測(cè)方法
- 檢測(cè)芯片、檢測(cè)設(shè)備、檢測(cè)系統(tǒng)和檢測(cè)方法
- 檢測(cè)裝置、檢測(cè)設(shè)備及檢測(cè)方法
- 檢測(cè)芯片、檢測(cè)設(shè)備、檢測(cè)系統(tǒng)
- 檢測(cè)組件、檢測(cè)裝置以及檢測(cè)系統(tǒng)
- 檢測(cè)裝置、檢測(cè)方法及檢測(cè)程序
- 檢測(cè)電路、檢測(cè)裝置及檢測(cè)系統(tǒng)





