[發(fā)明專利]網(wǎng)頁(yè)數(shù)據(jù)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010762446.3
• 申請(qǐng)日: 2020-07-31
• 公開（公告）號(hào): CN112035315A
• 公開（公告）日: 2020-12-04
• 發(fā)明（設(shè)計(jì)）人: 李琦;宋衛(wèi)東
• 申請(qǐng)（專利權(quán)）人: 重慶銳云科技有限公司
• 主分類號(hào): G06F11/30
• 分類號(hào): G06F11/30;G06F8/41
• 代理公司: 重慶智慧之源知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 50234
• 代理人: 高彬

本發(fā)明提供一種網(wǎng)頁(yè)數(shù)據(jù)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備及存儲(chǔ)介質(zhì)，其中，方法包括：根據(jù)約定，在網(wǎng)頁(yè)中對(duì)需要監(jiān)控的數(shù)據(jù)標(biāo)簽進(jìn)行自定義屬性標(biāo)識(shí)的添加，得到目標(biāo)網(wǎng)頁(yè)；將目標(biāo)網(wǎng)頁(yè)配置到預(yù)設(shè)的定時(shí)程序中；基于定時(shí)程序，定時(shí)獲取目標(biāo)網(wǎng)頁(yè)中帶有自定義屬性標(biāo)識(shí)的數(shù)據(jù)標(biāo)簽；獲取數(shù)據(jù)標(biāo)簽對(duì)應(yīng)的數(shù)據(jù)內(nèi)容，處理得到目標(biāo)數(shù)據(jù)，并將目標(biāo)數(shù)據(jù)存儲(chǔ)至數(shù)據(jù)庫(kù)中；基于數(shù)據(jù)庫(kù)，獲得相鄰兩次目標(biāo)數(shù)據(jù)的差值，并將差值與預(yù)設(shè)的閾值進(jìn)行比較，將差值大于閾值的進(jìn)行異常記錄和存儲(chǔ)。該方案解決了數(shù)據(jù)監(jiān)控業(yè)務(wù)的不通用性，減少為數(shù)據(jù)監(jiān)控對(duì)比而投入的大量人工和時(shí)間成本，提高了監(jiān)控效率。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)通信技術(shù)領(lǐng)域，尤其涉及一種網(wǎng)頁(yè)數(shù)據(jù)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備及存儲(chǔ)介質(zhì)。

背景技術(shù)

在現(xiàn)有的數(shù)據(jù)監(jiān)控業(yè)務(wù)中，一般都是在業(yè)務(wù)層對(duì)需要監(jiān)控的數(shù)據(jù)進(jìn)行對(duì)比，比如：數(shù)據(jù)清洗完成的同時(shí)對(duì)比清洗前后的數(shù)據(jù)、第三方數(shù)據(jù)獲取完成的同時(shí)對(duì)比獲取前后的數(shù)據(jù)，因此需要監(jiān)控程序的開發(fā)人員對(duì)需要監(jiān)控的業(yè)務(wù)進(jìn)行詳細(xì)的了解，并且做出相應(yīng)的數(shù)據(jù)指標(biāo)對(duì)比業(yè)務(wù)邏輯對(duì)數(shù)據(jù)進(jìn)行監(jiān)控，這樣的情況下需要的人力資源和時(shí)間成本就相對(duì)比較大；故而監(jiān)控方法也由于業(yè)務(wù)的局限性，并不能通用；而且隨著時(shí)間增長(zhǎng)和業(yè)務(wù)的不斷變化，對(duì)于數(shù)據(jù)監(jiān)控程序的維護(hù)也會(huì)越來越麻煩。

發(fā)明內(nèi)容

基于此，有必要針對(duì)上述技術(shù)問題，提供一種網(wǎng)頁(yè)數(shù)據(jù)監(jiān)控方法、裝置、計(jì)算機(jī)設(shè)備及存儲(chǔ)介質(zhì)。

一種網(wǎng)頁(yè)數(shù)據(jù)監(jiān)控方法，所述方法包括：根據(jù)約定，在網(wǎng)頁(yè)中對(duì)需要監(jiān)控的數(shù)據(jù)標(biāo)簽進(jìn)行自定義屬性標(biāo)識(shí)的添加，得到目標(biāo)網(wǎng)頁(yè)；將所述目標(biāo)網(wǎng)頁(yè)配置到預(yù)設(shè)的定時(shí)程序中；基于所述定時(shí)程序，定時(shí)獲取所述目標(biāo)網(wǎng)頁(yè)中帶有自定義屬性標(biāo)識(shí)的數(shù)據(jù)標(biāo)簽；獲取所述數(shù)據(jù)標(biāo)簽對(duì)應(yīng)的數(shù)據(jù)內(nèi)容，處理得到目標(biāo)數(shù)據(jù)，并將所述目標(biāo)數(shù)據(jù)存儲(chǔ)至數(shù)據(jù)庫(kù)中；基于所述數(shù)據(jù)庫(kù)，獲得相鄰兩次目標(biāo)數(shù)據(jù)的差值，并將所述差值與預(yù)設(shè)的閾值進(jìn)行比較，將所述差值大于閾值的進(jìn)行異常記錄和存儲(chǔ)。

在其中一個(gè)實(shí)施例中，所述根據(jù)約定，在網(wǎng)頁(yè)中對(duì)需要監(jiān)控的數(shù)據(jù)標(biāo)簽進(jìn)行自定義屬性標(biāo)識(shí)的添加，得到目標(biāo)網(wǎng)頁(yè)，具體為：根據(jù)預(yù)設(shè)的約定，在網(wǎng)頁(yè)中對(duì)需要監(jiān)控的數(shù)據(jù)標(biāo)簽進(jìn)行自定義屬性標(biāo)識(shí)的添加，所述自定義屬性標(biāo)識(shí)至少包括數(shù)據(jù)名稱、數(shù)據(jù)檢測(cè)以及預(yù)警閾值，并將所述添加自定義屬性標(biāo)識(shí)的網(wǎng)頁(yè)作為目標(biāo)網(wǎng)頁(yè)。

在其中一個(gè)實(shí)施例中，所述基于所述定時(shí)程序，定時(shí)獲取所述目標(biāo)網(wǎng)頁(yè)中帶有自定義屬性標(biāo)識(shí)的數(shù)據(jù)標(biāo)簽，具體為：基于所述定時(shí)程序，利用頁(yè)面解析技術(shù)對(duì)所述目標(biāo)網(wǎng)頁(yè)進(jìn)行結(jié)構(gòu)解析，并獲取所述目標(biāo)網(wǎng)頁(yè)中擁有所述自定義屬性標(biāo)識(shí)的數(shù)據(jù)標(biāo)簽。

在其中一個(gè)實(shí)施例中，所述獲取所述數(shù)據(jù)標(biāo)簽對(duì)應(yīng)的數(shù)據(jù)內(nèi)容，處理得到目標(biāo)數(shù)據(jù)，并將所述目標(biāo)數(shù)據(jù)存儲(chǔ)至數(shù)據(jù)庫(kù)中，具體為：獲取所述數(shù)據(jù)標(biāo)簽對(duì)應(yīng)的數(shù)據(jù)內(nèi)容；對(duì)所述數(shù)據(jù)內(nèi)容進(jìn)行數(shù)據(jù)結(jié)構(gòu)處理，得到目標(biāo)數(shù)據(jù)結(jié)構(gòu)形式的目標(biāo)數(shù)據(jù)；將所述目標(biāo)數(shù)據(jù)存儲(chǔ)至預(yù)設(shè)的數(shù)據(jù)庫(kù)中。

在其中一個(gè)實(shí)施例中，所述基于所述數(shù)據(jù)庫(kù)，獲得相鄰兩次目標(biāo)數(shù)據(jù)的差值，并將所述差值與預(yù)設(shè)的閾值進(jìn)行比較，將所述差值大于閾值的異常記錄和存儲(chǔ)之后，還包括：將所述帶有異常記錄的信息進(jìn)行匯總，并發(fā)送通知至相關(guān)人員。

一種網(wǎng)頁(yè)數(shù)據(jù)監(jiān)控裝置，包括標(biāo)識(shí)添加模塊、程序配置模塊、數(shù)據(jù)獲取模塊、數(shù)據(jù)處理模塊和數(shù)據(jù)監(jiān)測(cè)模塊，其中：所述標(biāo)識(shí)添加模塊用于，根據(jù)約定，在網(wǎng)頁(yè)中對(duì)需要監(jiān)控的數(shù)據(jù)標(biāo)簽進(jìn)行自定義屬性標(biāo)識(shí)的添加，得到目標(biāo)網(wǎng)頁(yè)；所述程序配置模塊用于，將所述目標(biāo)網(wǎng)頁(yè)配置到預(yù)設(shè)的定時(shí)程序中；所述數(shù)據(jù)獲取模塊用于，基于所述定時(shí)程序，定時(shí)獲取所述目標(biāo)網(wǎng)頁(yè)中帶有自定義屬性標(biāo)識(shí)的數(shù)據(jù)標(biāo)簽；所述數(shù)據(jù)處理模塊用于，獲取所述數(shù)據(jù)標(biāo)簽對(duì)應(yīng)的數(shù)據(jù)內(nèi)容，處理得到目標(biāo)數(shù)據(jù)，并將所述目標(biāo)數(shù)據(jù)存儲(chǔ)至數(shù)據(jù)庫(kù)中；所述數(shù)據(jù)監(jiān)測(cè)模塊用于，基于所述數(shù)據(jù)庫(kù)，獲得相鄰兩次目標(biāo)數(shù)據(jù)的差值，并將所述差值與預(yù)設(shè)的閾值進(jìn)行比較，將所述差值大于閾值的進(jìn)行異常記錄和存儲(chǔ)。