[發明專利]異常數據檢測方法、裝置、設備及存儲介質在審
| 申請號: | 202110365097.6 | 申請日: | 2021-04-06 |
| 公開(公告)號: | CN112765044A | 公開(公告)日: | 2021-05-07 |
| 發明(設計)人: | 杜仕偉 | 申請(專利權)人: | 上海釤昆網絡科技有限公司 |
| 主分類號: | G06F11/36 | 分類號: | G06F11/36;G06F11/32;G06F16/242 |
| 代理公司: | 北京東方億思知識產權代理有限責任公司 11258 | 代理人: | 彭瓊 |
| 地址: | 201201 上海市浦東*** | 國省代碼: | 上海;31 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 異常 數據 檢測 方法 裝置 設備 存儲 介質 | ||
本申請實施例提供一種異常數據檢測方法、裝置、設備及存儲介質。該方法包括:獲取待檢測標簽數據;根據預設路徑信息調用預設腳本,其中,預設腳本包括檢測子腳本;執行檢測子腳本對待檢測標簽數據進行異常數據檢測。根據本申請實施例可以實現異常數據檢測的自動化,提高異常數據檢測效率。
技術領域
本申請涉及數據監控技術領域,尤其涉及一種異常數據檢測方法、裝置、設備及存儲介質。
背景技術
目前,異常數據檢測是數據監控中的重要環節,主要是通過人工對標簽數據進行異常數據檢測,來及時發現異常,并向相關人員進行告警。
但是隨著大數據業務與多媒體業務的發展,需要檢測的數據量越來越大,通過人工對標簽數據進行異常數據檢測存在效率較低的問題。
發明內容
本申請實施例提供了一種異常數據檢測方法、裝置、設備及存儲介質,能夠實現異常數據檢測的自動化,提高異常數據檢測效率。
第一方面,本申請實施例提供一種異常數據檢測方法,該方法包括:
獲取待檢測標簽數據;
根據預設路徑信息調用預設腳本,其中,預設腳本包括檢測子腳本;
執行檢測子腳本對待檢測標簽數據進行異常數據檢測。
在第一方面的一些可實現方式中,預設腳本還包括告警子腳本;
該方法還包括:
在檢測結果滿足預設異常條件的情況下,執行告警子腳本向預設電子設備發送告警信息。
在第一方面的一些可實現方式中,在檢測結果滿足預設異常條件的情況下,執行告警子腳本向預設電子設備發送告警信息,包括:
在檢測結果滿足預設異常條件的情況下,執行告警子腳本,通過郵件的方式向預設電子設備發送告警信息。
在第一方面的一些可實現方式中,告警信息包括告警類別和告警詳情。
在第一方面的一些可實現方式中,檢測結果包括數據異常結果、數據缺失結果、數據重復結果、數據波動結果、數據一致結果中至少一項。
在第一方面的一些可實現方式中,預設腳本為計算機殼層(Shell)腳本。
在第一方面的一些可實現方式中,待檢測標簽數據包括在Hive表中,檢測子腳本為Hive SQL腳本。
在第一方面的一些可實現方式中,根據預設路徑信息,調用預設腳本,包括:
在檢測到時間到達預設時間點的情況下,根據預設路徑信息調用預設腳本。
第二方面,本申請實施例提供一種異常數據檢測裝置,該裝置包括:
獲取模塊,用于獲取待檢測標簽數據;
調用模塊,用于根據預設路徑信息調用預設腳本,其中,預設腳本包括檢測子腳本;
執行模塊,用于執行檢測子腳本對待檢測標簽數據進行異常數據檢測。
在第二方面的一些可實現方式中,預設腳本還包括告警子腳本;
執行模塊,還用于在檢測結果滿足預設異常條件的情況下,執行告警子腳本向預設電子設備發送告警信息。
在第二方面的一些可實現方式中,執行模塊,具體用于在檢測結果滿足預設異常條件的情況下,執行告警子腳本,通過郵件的方式向預設電子設備發送告警信息。
在第二方面的一些可實現方式中,告警信息包括告警類別和告警詳情。
在第二方面的一些可實現方式中,檢測結果包括數據異常結果、數據缺失結果、數據重復結果、數據波動結果、數據一致結果中至少一項。
在第二方面的一些可實現方式中,預設腳本為Shell腳本。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于上海釤昆網絡科技有限公司,未經上海釤昆網絡科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202110365097.6/2.html,轉載請聲明來源鉆瓜專利網。
- 數據顯示系統、數據中繼設備、數據中繼方法、數據系統、接收設備和數據讀取方法
- 數據記錄方法、數據記錄裝置、數據記錄媒體、數據重播方法和數據重播裝置
- 數據發送方法、數據發送系統、數據發送裝置以及數據結構
- 數據顯示系統、數據中繼設備、數據中繼方法及數據系統
- 數據嵌入裝置、數據嵌入方法、數據提取裝置及數據提取方法
- 數據管理裝置、數據編輯裝置、數據閱覽裝置、數據管理方法、數據編輯方法以及數據閱覽方法
- 數據發送和數據接收設備、數據發送和數據接收方法
- 數據發送裝置、數據接收裝置、數據收發系統、數據發送方法、數據接收方法和數據收發方法
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置
- 數據發送方法、數據再現方法、數據發送裝置及數據再現裝置





