[發(fā)明專利]一種可配置的多維度數(shù)據(jù)監(jiān)控方法、裝置及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202210173886.4
• 申請(qǐng)日: 2022-02-24
• 公開(kāi)（公告）號(hào): CN114595129A
• 公開(kāi)（公告）日: 2022-06-07
• 發(fā)明（設(shè)計(jì)）人: 黃超
• 申請(qǐng)（專利權(quán)）人: 上海識(shí)裝信息科技有限公司
• 主分類號(hào): G06F11/34
• 分類號(hào): G06F11/34;G06F11/30
• 代理公司: 深圳市易美諾知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44520
• 代理人: 沈榮彬

本發(fā)明公開(kāi)了一種可配置的多維度數(shù)據(jù)監(jiān)控方法、裝置及存儲(chǔ)介質(zhì)，方法包括：配置數(shù)據(jù)字段，得到配置字段；Flink根據(jù)配置字段對(duì)日志服務(wù)器中的第一業(yè)務(wù)數(shù)據(jù)進(jìn)行過(guò)濾處理，得到第二業(yè)務(wù)數(shù)據(jù)；把第二業(yè)務(wù)數(shù)據(jù)存入數(shù)據(jù)庫(kù)中；配置監(jiān)控指標(biāo)，得到配置指標(biāo)；根據(jù)配置指標(biāo)查詢數(shù)據(jù)庫(kù)得到第三業(yè)務(wù)數(shù)據(jù)，對(duì)第三業(yè)務(wù)數(shù)據(jù)進(jìn)行指標(biāo)展示。通過(guò)本發(fā)明實(shí)施例，將日志服務(wù)器的數(shù)據(jù)記錄到系統(tǒng)中，并支持通過(guò)配置X軸、Y軸及函數(shù)配置，規(guī)避了日志服務(wù)器的SQL編寫(xiě)，有效降低配置門(mén)檻；采用多字段多條件的圖例，從而實(shí)現(xiàn)多維度指標(biāo)配置，能夠靈活將業(yè)務(wù)埋點(diǎn)組裝到同一個(gè)指標(biāo)圖中。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種可配置的多維度數(shù)據(jù)監(jiān)控方法、裝置及存儲(chǔ)介質(zhì)。

背景技術(shù)

大型APP往往承載著諸多業(yè)務(wù)，以購(gòu)物APP為例，就存在社區(qū)、交易、直播等六項(xiàng)業(yè)務(wù)，隨著APP版本的迭代，業(yè)務(wù)也在高速發(fā)展，實(shí)時(shí)獲取APP的業(yè)務(wù)監(jiān)控對(duì)當(dāng)前業(yè)務(wù)的運(yùn)行質(zhì)量以及后續(xù)業(yè)務(wù)決策均有著重要收益。

業(yè)務(wù)監(jiān)控往往用于監(jiān)控某一項(xiàng)業(yè)務(wù)中的某一項(xiàng)功能的使用，傳統(tǒng)方式是針對(duì)每一項(xiàng)功能進(jìn)行埋點(diǎn)上報(bào)，然后配置數(shù)據(jù)源以及展示圖表，這方面典型的方案是ElasticSearch+Grafana，采用ElasticSearch作為存儲(chǔ)以及搜索服務(wù)，采用Grafana作為指標(biāo)展示系統(tǒng)，這套方案深受各大公司的認(rèn)可，其在實(shí)際使用中也存在技術(shù)門(mén)檻，基礎(chǔ)設(shè)施需要團(tuán)隊(duì)定期維護(hù)，指標(biāo)也需要專業(yè)的研發(fā)人員才能配置，對(duì)埋點(diǎn)代碼不熟悉時(shí)，就無(wú)法配置，這一限制導(dǎo)致產(chǎn)品經(jīng)理無(wú)法介入指標(biāo)配置。

業(yè)務(wù)埋點(diǎn)的重要使用者是產(chǎn)品經(jīng)理，面向產(chǎn)品經(jīng)理的一款通用型可配置的多維度指標(biāo)系統(tǒng)能夠降低埋點(diǎn)配置的復(fù)雜度以及提高配置效率，同時(shí)對(duì)埋點(diǎn)的成本可管控。

發(fā)明內(nèi)容

本發(fā)明的主要目的在于提供一種可配置的多維度數(shù)據(jù)監(jiān)控方法、裝置及存儲(chǔ)介質(zhì)，旨在解決現(xiàn)有技術(shù)中指標(biāo)監(jiān)控系統(tǒng)配置復(fù)雜和配置效率低的問(wèn)題。

為實(shí)現(xiàn)上述目的，本發(fā)明提供了一種可配置的多維度數(shù)據(jù)監(jiān)控方法，所述方法包括以下步驟：

配置數(shù)據(jù)字段，得到配置字段；

Flink根據(jù)所述配置字段對(duì)日志服務(wù)器中的第一業(yè)務(wù)數(shù)據(jù)進(jìn)行過(guò)濾處理，得到第二業(yè)務(wù)數(shù)據(jù)；把所述第二業(yè)務(wù)數(shù)據(jù)存入數(shù)據(jù)庫(kù)中；

配置監(jiān)控指標(biāo)，得到配置指標(biāo)；

根據(jù)所述配置指標(biāo)查詢所述數(shù)據(jù)庫(kù)得到第三業(yè)務(wù)數(shù)據(jù)，對(duì)所述第三業(yè)務(wù)數(shù)據(jù)進(jìn)行指標(biāo)展示。

可選地，所述配置數(shù)據(jù)字段得到配置字段，包括以下步驟：

設(shè)置業(yè)務(wù)標(biāo)識(shí)和/或功能標(biāo)識(shí)和/或基礎(chǔ)字段和/或自定義字段；

建立所述業(yè)務(wù)標(biāo)識(shí)與數(shù)據(jù)庫(kù)關(guān)聯(lián)關(guān)系，N(N大于等于1)個(gè)所述業(yè)務(wù)標(biāo)識(shí)與1個(gè)所述數(shù)據(jù)庫(kù)建立關(guān)聯(lián)關(guān)系；

建立所述功能標(biāo)識(shí)與數(shù)據(jù)庫(kù)表關(guān)聯(lián)關(guān)系，N(N大于等于1)個(gè)所述功能標(biāo)識(shí)與1張所述數(shù)據(jù)庫(kù)表建立關(guān)聯(lián)關(guān)系；

建立所述基礎(chǔ)字段和/或所述自定義字段與所述數(shù)據(jù)庫(kù)表的字段的關(guān)聯(lián)關(guān)系。

可選地，所述方法還包括：

計(jì)算所述功能標(biāo)識(shí)對(duì)應(yīng)的記錄條數(shù)；

判斷所述記錄條數(shù)在所述功能標(biāo)識(shí)對(duì)應(yīng)的所述數(shù)據(jù)庫(kù)表的總記錄中的第一占比和/或指定時(shí)間范圍內(nèi)的第二占比；

所述第一占比大于第一閾值和/或所述第二占比大于第二閾值，對(duì)所述第二業(yè)務(wù)數(shù)據(jù)進(jìn)行采樣，得到第四業(yè)務(wù)數(shù)據(jù)，然后把所述第四業(yè)務(wù)數(shù)據(jù)存入數(shù)據(jù)庫(kù)中。

可選地，所述配置監(jiān)控指標(biāo)得到配置指標(biāo)，包括以下步驟：

所述監(jiān)控指標(biāo)包括以下至少一種：圖表類型、功能指標(biāo)，X軸指標(biāo)、Y軸指標(biāo)、圖例指標(biāo)、查詢條件、過(guò)濾條件；