[發明專利]數據監控方法、裝置和計算機存儲介質

在審

• 申請號: 201711088328.3
• 申請日: 2017-11-07
• 公開（公告）號: CN107844401A
• 公開（公告）日: 2018-03-27
• 發明（設計）人: 范芳銘;曹悅
• 申請（專利權）人: 廣州品唯軟件有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F11/32;G06F17/30;G06Q30/06
• 代理公司: 深圳市世紀恒程知識產權代理事務所44287
• 代理人: 胡海國

技術領域

本發明涉及大數據處理領域，尤其涉及一種數據監控方法、裝置和計算機存儲介質。

背景技術

唯品會是一個以搶購和折扣為運營模式的電商網站，目前注冊會員超過2億。其根據用戶的愛好和習慣，給用戶推送合適的商品，因此，需要快速、穩定的超大規模實時數據運算技術來支撐。然而實時數據的運算轉瞬即逝，數據處理的正確性及延遲性等問題引起了程序開發者的高度重視，通過數據監控技術監控實時數據，可在數據處理出現錯誤或者延遲時，給運維人員以警告，以便快速及時處理此類問題。

現有的數據監控技術一般包括傳統的數據庫觸發器、各類實時計算自帶的監控及記錄分布式日志。但是，在數據處理發生異常時，實時追蹤定位的難度系數較大，而且數據處理的延遲性比較高。

發明內容

本發明的主要目的在于提供一種數據監控方法、裝置和計算機存儲介質，旨在解決傳統的數據處理出現異常時，實時追蹤定位的難度系數較大以及數據處理的延遲性比較高的技術問題。

為實現上述目的，本發明提供一種數據監控方法，所述數據監控方法包括步驟：

在接收到數據請求時，分布式存儲處理所述數據請求的時長；

獲取存儲的預設數量的所述時長；

分別計算獲取的所述時長的平均值和標準差；

在所述標準差大于或等于所述平均值的第一預設倍數時，輸出第一告警信息。

優選地，所述分別計算獲取的所述時長的平均值和標準差的步驟之后，所述數據監控方法還包括：

在所述標準差小于所述平均值的第一預設倍數且大于或等于所述平均值的第二預設倍數時，輸出第二告警信息。

優選地，所述分別計算獲取的所述時長的平均值和標準差的步驟之后，所述數據監控方法還包括：

在所述標準差小于所述平均值的第二預設倍數時，輸出系統正常運行信息并輸出系統運行的各項參數信息。

優選地，所述數據監控方法還包括：

在接收到數據請求時，分布式存儲所述數據請求對應的數據；

獲取存儲的所述數據中待用戶處理的數據；

獲取所述待用戶處理的數據未被處理的時長；

在所述時長大于預設時長時，獲取所述待用戶處理的數據對應的用戶信息，并根據所述用戶信息輸出提醒信息。

優選地，所述在接收到數據請求時，分布式存儲所述數據請求對應的數據的步驟之后，所述數據監控方法還包括：

獲取存儲的所述數據中的用戶信息及對應的歷史數據；

根據所述用戶信息及對應的歷史數據生成推薦信息，并向用戶推送所述推薦信息。

優選地，所述獲取存儲的預設數量的所述時長的步驟包括：

從存儲的所述時長中抽取預設百分數的時長。

優選地，所述獲取存儲的預設數量的所述時長的步驟包括：

從存儲的所述時長中獲取預設時間段或者預設日期的時長。

此外，為實現上述目的，本發明還提供一種數據監控裝置，所述數據監控裝置包括存儲器、處理器及存儲在所述存儲器上并可在所述處理器上運行的計算機程序，所述計算機程序被所述處理器執行時實現如以上所述的數據監控方法的步驟。

此外，為實現上述目的，本發明還提供一種計算機可讀存儲介質，所述計算機可讀存儲介質上存儲有數據監控程序，所述數據監控程序被處理器執行時實現如以上所述的數據監控方法的步驟。

本發明提出的數據監控方法、裝置和計算機存儲介質，通過在接收到數據請求時，分布式存儲處理數據請求的時長，然后獲取存儲的預設數量的時長，再分別計算獲取的時長的平均值和標準差，在標準差大于或等于平均值的第一預設倍數時，輸出第一告警信息。本發明通過對存儲的處理數據請求的時長進行分析，實現在接收到大規模數據請求時，監控處理數據請求的時長是否出現延遲。

附圖說明

圖1為本發明實施例方案涉及的硬件運行環境的終端結構示意圖；

圖2為本發明數據監控方法第一實施例的流程示意圖；

圖3為本發明數據監控方法第二實施例的流程示意圖；

圖4為本發明數據監控方法第三實施例的流程示意圖；

圖5為本發明數據監控方法第四實施例的流程示意圖；

圖6為本發明數據監控方法第五實施例的流程示意圖；

圖7為本發明數據監控方法第六實施例的流程示意圖；

圖8為本發明數據監控方法第七實施例的流程示意圖；

本發明目的的實現、功能特點及優點將結合實施例，參照附圖做進一步說明。

具體實施方式