[發(fā)明專利]一種社交數(shù)據(jù)監(jiān)控系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201710559491.7
• 申請日: 2017-07-11
• 公開（公告）號: CN107463479A
• 公開（公告）日: 2017-12-12
• 發(fā)明（設(shè)計）人: 楊博
• 申請（專利權(quán)）人: 上海精數(shù)信息科技有限公司
• 主分類號: G06F11/30
• 分類號: G06F11/30;G06F11/32
• 代理公司: 北京睿邦知識產(chǎn)權(quán)代理事務(wù)所(普通合伙)11481
• 代理人: 余玥君

技術(shù)領(lǐng)域

本發(fā)明涉及互聯(lián)網(wǎng)安全領(lǐng)域，特別是一種社交數(shù)據(jù)監(jiān)控系統(tǒng)。

背景技術(shù)

隨著社交網(wǎng)絡(luò)、移動互聯(lián)網(wǎng)的大規(guī)模發(fā)展，人們能更方便的通過手機獲取資訊、發(fā)表言論、溝通交流。特別是在社交網(wǎng)絡(luò)繁榮之后，每個網(wǎng)民都可以創(chuàng)造信息，使得網(wǎng)絡(luò)中的信息量出現(xiàn)爆發(fā)式的增長，數(shù)據(jù)來源也呈現(xiàn)出多樣化的趨勢，逐步分化出微博、微信、電商、論壇、問答等越來越多的來源。

社交數(shù)據(jù)越來越多，形式和平臺越來越豐富，在提供數(shù)據(jù)給大量的品牌客戶進行分析的同時，系統(tǒng)內(nèi)部如何及時準(zhǔn)確地監(jiān)控這些數(shù)據(jù)，以及監(jiān)控系統(tǒng)自身穩(wěn)定成了一個關(guān)鍵點。

發(fā)明內(nèi)容

現(xiàn)有技術(shù)中，系統(tǒng)復(fù)雜度較高，搭建和實現(xiàn)難度較大，偏向于瞬時的數(shù)據(jù)監(jiān)控與報警。雖然有些技術(shù)涉及數(shù)據(jù)持久化和圖表化展現(xiàn)，但并沒有技術(shù)方案涉及快速分析和展現(xiàn)大規(guī)模的歷史數(shù)據(jù)。就目前來看，現(xiàn)有技術(shù)不具備快速分析和快速查看歷史數(shù)據(jù)的特點。

有鑒于此，發(fā)明人在為不同的數(shù)據(jù)來源搭建特有的數(shù)據(jù)獲取平臺的同時，搭建了社交數(shù)據(jù)監(jiān)控系統(tǒng)，用于提高這些平臺的穩(wěn)定性，及早發(fā)現(xiàn)問題，幫助排查問題，以及驗證問題解決。

根據(jù)本發(fā)明的第一方面，本發(fā)明提供了一種社交數(shù)據(jù)監(jiān)控系統(tǒng)，其包括：

ES單元，數(shù)據(jù)存儲和搜索；

收集器數(shù)據(jù)采集單元，通過API采集各個平臺的數(shù)據(jù)，并將采集到的數(shù)據(jù)存儲到ES單元；

SDK數(shù)據(jù)采集單元，通過SDK采集應(yīng)用內(nèi)部的數(shù)據(jù)，并將采集到的數(shù)據(jù)存儲到ES單元；

監(jiān)控單元，其調(diào)取ES單元存儲的數(shù)據(jù)，通過Grafana展示單元和/或Web展示單元展示。

優(yōu)選地，所述收集器數(shù)據(jù)采集單元采集的數(shù)據(jù)包括系統(tǒng)信息和設(shè)備信息。

所述設(shè)備信息包括但不限于：網(wǎng)卡信息、CPU信息、內(nèi)存、硬盤等。

優(yōu)選地，所述SDK數(shù)據(jù)采集單元采集的數(shù)據(jù)包括任務(wù)信息。

所述任務(wù)信息包括但不限于：監(jiān)控業(yè)務(wù)的吞吐量、任務(wù)隊列長度、任務(wù)延時等。

優(yōu)選地，所述SDK數(shù)據(jù)采集單元包括采樣模塊，按照調(diào)用量采樣收集數(shù)據(jù)。

優(yōu)選地，所述SDK數(shù)據(jù)采集單元包括數(shù)據(jù)整理模塊，保證數(shù)據(jù)格式統(tǒng)一。

優(yōu)選地，所述SDK數(shù)據(jù)采集單元包括聚合模塊，對采集到的數(shù)據(jù)進行聚合處理。

優(yōu)選地，所述監(jiān)控單元包括報警模塊，當(dāng)所監(jiān)控的數(shù)據(jù)超過閾值時，啟動報警。

優(yōu)選地，所述報警模塊包括郵件報警和/或電話報警。

優(yōu)選地，所述Grafana展示單元也可包括報警模塊，在報警模塊中設(shè)定閾值，當(dāng)數(shù)據(jù)超過閾值時，通過Grafana展示單元的UI組件渲染展示。

優(yōu)選地，所述社交數(shù)據(jù)來自：微博、微信、QQ、BBS、貼吧、論壇、人人網(wǎng)、知乎中的一種或多種。

附圖說明

通過閱讀參考一下附圖所作的對非限制性實施例所作的詳細描述，本發(fā)明的其他特征、目的和優(yōu)點將會變得更明顯：

圖1是根據(jù)本發(fā)明的一些實施方式的社交數(shù)據(jù)監(jiān)控系統(tǒng)的示意圖。

圖2是根據(jù)本發(fā)明的另一些實施方式的社交數(shù)據(jù)監(jiān)控系統(tǒng)的示意圖。

圖3為在本發(fā)明的一些具體實施例中利用Web展示單元展示監(jiān)控數(shù)據(jù)的示意圖。

圖4a-圖4c在本發(fā)明的一些具體實施例中利用Grafana展示單元展示監(jiān)控數(shù)據(jù)的示意圖。

具體實施方式

在下文的描述中，給出了大量具體的細節(jié)以便提供對本發(fā)明更為徹底的理解。然而，對于本領(lǐng)域技術(shù)人員來說顯而易見的是，本發(fā)明可以無需一個或多個這些細節(jié)而得以實施。在其他的例子中，為了避免與本發(fā)明發(fā)生/混淆，對于本領(lǐng)域公知的一些技術(shù)特征未進行描述。

在本發(fā)明中，術(shù)語“數(shù)據(jù)獲取平臺”是指獲取數(shù)據(jù)的平臺，通過程序和接口自動瀏覽網(wǎng)頁數(shù)據(jù)，整合數(shù)據(jù)并存儲的裝置。

本發(fā)明中所監(jiān)控的數(shù)據(jù)包括但不限于分析數(shù)據(jù)、跟蹤數(shù)據(jù)和全局?jǐn)?shù)據(jù)。

術(shù)語“Grafana”是一個開源的可視化監(jiān)控數(shù)據(jù)展現(xiàn)平臺，具有功能齊全的度量儀表盤和圖形編輯器，支持Graphite，InfluxDB、OpenTSDB和ElasticSearch，具有靈活豐富的圖形化選項；可以混合多種風(fēng)格；支持白天和夜間模式。

術(shù)語“API”(Application Programming Interface)，應(yīng)用程序編程接口，是一些預(yù)先定義的函數(shù)，目的是提供應(yīng)用程序與開發(fā)人員基于某軟件或硬件得以訪問一組例程的能力，而又無需訪問源碼，或理解內(nèi)部工作機制的細節(jié)。