[發明專利]數據監控方法、裝置、計算機設備及存儲介質

在審

• 申請號: 202010219443.5
• 申請日: 2020-03-25
• 公開（公告）號: CN111581048A
• 公開（公告）日: 2020-08-25
• 發明（設計）人: 鄧超
• 申請（專利權）人: 中國平安人壽保險股份有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30
• 代理公司: 深圳眾鼎專利商標代理事務所(普通合伙) 44325
• 代理人: 周燕君

本發明公開一種數據監控方法、裝置、計算機設備及存儲介質，該數據監控方法包括獲取大規模數據監控請求，所述大規模數據監控請求包括至少一個監控標識；調入監控標識對應的數據源，形成所述監控標識對應的監控配置表；所述監控配置表中包括至少一個監控標識對應的待監控數據以及與所述待監控數據對應的數據輸出格式；將所述待監控數據對應的待監控數據格式與所述數據輸出格式進行對比，獲取對比結果；提取所述對比結果為警報的待監控數據，形成與所述監控標識對應的監控結果表；將所述監控結果表發送給所述監控標識對應的監控端，該方法可有效提高數據監控的整合性和兼容性。

技術領域

本發明涉及數據監控技術領域，尤其涉及一種數據監控方法、裝置、計算機設備及存儲介質。

背景技術

數據質量是數據挖掘領域的重要基礎，數據特征的正確性、穩定性會直接影響算法結果。目前常基于hadoop平臺進行大數據分析及數據挖掘。而hdfs(Hadoop DistributedFile System,Hadoop分布式文件系統)數據存儲相對于傳統關系型數據的強類型而言，較為弱化，對算法也形成較大挑戰。

目前，基于hadoop平臺的大規模數據監控，主要通過編寫hive腳本程序的方式，把需要監控的內容固定寫如hive程序中，以實現對應功能或者模塊的監控存在以下問題：難以大規模應用，針對大規模的監控，需要開發大量的hive監控程序，且各監控程序互相之間獨立，不易維護和管理，導致監控數據質量的整合性和兼容性較差。

發明內容

本發明實施例提供一種數據監控方法、裝置、計算機設備及存儲介質，以解決當前監控數據質量的整合性和兼容性差的問題。

一種數據監控方法，包括：

獲取大規模數據監控請求，所述大規模數據監控請求包括至少一個監控標識；

調入監控標識對應的數據源，形成所述監控標識對應的監控配置表；所述監控配置表中包括至少一個監控標識對應的待監控數據以及與所述待監控數據對應的數據輸出格式；

將所述待監控數據對應的待監控數據格式與所述數據輸出格式進行對比，獲取對比結果；

提取所述對比結果為警報的待監控數據，形成與所述監控標識對應的監控結果表；

將所述監控結果表發送給所述監控標識對應的監控端。

一種數據監控裝置，包括：

監控請求獲取模塊，用于獲取大規模數據監控請求，所述大規模數據監控請求包括至少一個監控標識；

監控配置表生成模塊，用于調入監控標識對應的數據源，形成所述監控標識對應的監控配置表；所述監控配置表中包括至少一個監控標識對應的待監控數據以及與所述待監控數據對應的數據輸出格式；

對比結果獲取模塊，用于將所述待監控數據對應的待監控數據格式與所述數據輸出格式進行對比，獲取對比結果；

監控結果表獲取模塊，用于提取所述對比結果為警報的待監控數據，形成與所述監控標識對應的監控結果表；

監控結果發送模塊，用于將所述監控結果表發送給所述監控標識對應的監控端。

一種計算機設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，所述處理器執行所述計算機程序時實現上述數據監控方法的步驟。

一種計算機存儲介質，所述計算機存儲介質存儲有計算機程序，所述計算機程序被處理器執行時實現上述數據監控方法的步驟。