[發(fā)明專利]一種網(wǎng)絡(luò)大數(shù)據(jù)可視化信息系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201610531420.1
• 申請(qǐng)日: 2016-06-29
• 公開（公告）號(hào): CN106708918A
• 公開（公告）日: 2017-05-24
• 發(fā)明（設(shè)計(jì)）人: 卓子寒;劉中金;何躍鷹;李晗;董建武;方喆君
• 申請(qǐng)（專利權(quán)）人: 國(guó)家計(jì)算機(jī)網(wǎng)絡(luò)與信息安全管理中心
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30
• 代理公司: 暫無(wú)信息
• 代理人: 暫無(wú)信息

技術(shù)領(lǐng)域

本發(fā)明涉及網(wǎng)絡(luò)技術(shù)領(lǐng)域，尤其涉及一種網(wǎng)絡(luò)大數(shù)據(jù)可視化信息系統(tǒng)。

背景技術(shù)

近年隨著因特網(wǎng)、移動(dòng)互聯(lián)網(wǎng)和物聯(lián)網(wǎng)的飛速發(fā)展，世界已經(jīng)進(jìn)入數(shù)據(jù)爆炸時(shí)代。從商業(yè)公司的各種管理與運(yùn)營(yíng)數(shù)據(jù)，到個(gè)人移動(dòng)終端的社會(huì)化數(shù)據(jù)，再到互聯(lián)網(wǎng)產(chǎn)生的海量信息數(shù)據(jù)，每時(shí)每刻產(chǎn)生的信息量正在飛速增長(zhǎng)。如何直觀揭示海量數(shù)據(jù)間的關(guān)系和信息中隱藏的特征，成為世界范圍內(nèi)重要的研究課題，進(jìn)而促使了信息可視化這一嶄新科學(xué)領(lǐng)域的出現(xiàn)。

海量數(shù)據(jù)可視化技術(shù)結(jié)合了科學(xué)可視化、人機(jī)交互、數(shù)據(jù)挖掘、圖像圖形學(xué)和認(rèn)知科學(xué)等諸多學(xué)科的理論和方法，主要應(yīng)用于沒(méi)有幾何屬性的抽象信息，揭示信息中隱藏的知識(shí)。可視化將數(shù)據(jù)信息和知識(shí)轉(zhuǎn)化為一種視覺(jué)形式，充分利用了人們對(duì)可視模式快速識(shí)別的自然能力。在信息日益豐富的社會(huì)，可視化技術(shù)的研究和應(yīng)用開發(fā)已經(jīng)從根本上改變了大型復(fù)雜數(shù)據(jù)的理解方式，從而引導(dǎo)人類獲得新的洞察，進(jìn)而制定有效的決策。

目前的可視化系統(tǒng)架構(gòu)主要分為Client/Server(C/S)和Browser/Server(B/S)兩種模式。C/S可視化系統(tǒng)對(duì)計(jì)算機(jī)的硬件渲染能力要求較高，且平臺(tái)兼容性較差，往往需要開發(fā)不同平臺(tái)的客戶端軟件，存在一定的應(yīng)用局限性。

發(fā)明內(nèi)容

為解決背景技術(shù)中存在的技術(shù)問(wèn)題，本發(fā)明提出一種網(wǎng)絡(luò)大數(shù)據(jù)可視化信息系統(tǒng)，采用計(jì)算機(jī)分布式架構(gòu)和高效網(wǎng)絡(luò)傳輸技術(shù)，完成海量網(wǎng)絡(luò)數(shù)據(jù)可視化系統(tǒng)的總體架構(gòu)設(shè)計(jì)，并基于WEB全棧技術(shù)實(shí)現(xiàn)。

為此，本發(fā)明提供了一種網(wǎng)絡(luò)大數(shù)據(jù)可視化信息系統(tǒng)，分為三層，從下到上分別為數(shù)據(jù)庫(kù)層、數(shù)據(jù)交換層和應(yīng)用層；

所述數(shù)據(jù)庫(kù)層為系統(tǒng)提供數(shù)據(jù)支撐，用于存儲(chǔ)系統(tǒng)所需的原始數(shù)據(jù)、處理后的中間數(shù)據(jù)以及最終的展示數(shù)據(jù)；

所述數(shù)據(jù)交換層封裝了訪問(wèn)數(shù)據(jù)庫(kù)的操作，同時(shí)提供了Redis緩存，用于緩存常用的數(shù)據(jù)，提高應(yīng)用層讀取數(shù)據(jù)的效率；

所述應(yīng)用層為一個(gè)WEB站點(diǎn)，分為后端和前端兩部分；其中后端底層邏輯處理、數(shù)據(jù)庫(kù)通信和交換，以及數(shù)據(jù)處理；同時(shí)，后端還提供用戶權(quán)限、系統(tǒng)配置等功能；WEB前端用于用戶與系統(tǒng)交互，并對(duì)數(shù)據(jù)進(jìn)行可視化展示；前端框架負(fù)責(zé)前端功能的邏輯處理，并組織數(shù)據(jù)提供給可視化工具集進(jìn)行渲染。

根據(jù)上述方案，該可視化信息系統(tǒng)的數(shù)據(jù)存儲(chǔ)采用Key-Value格式的MongoDB非關(guān)系型數(shù)據(jù)庫(kù)。

根據(jù)上述方案，該可視化信息系統(tǒng)采用WebSocket作為通訊協(xié)議，WebSocket在進(jìn)行一次TCP連接后，基于此連接進(jìn)行后續(xù)的數(shù)據(jù)傳輸，無(wú)需多次發(fā)送HTTP報(bào)文。

根據(jù)上述方案，該可視化信息系統(tǒng)采用發(fā)布/訂閱的數(shù)據(jù)獲取模式，后端定義多個(gè)數(shù)據(jù)源，前端根據(jù)需求訂閱相應(yīng)的數(shù)據(jù)，當(dāng)后端的數(shù)據(jù)源發(fā)生變動(dòng)時(shí)，前端頁(yè)面能夠?qū)崟r(shí)的獲取變動(dòng)情況，及時(shí)更新頁(yè)面顯示。

本發(fā)明提出的一種網(wǎng)絡(luò)大數(shù)據(jù)可視化信息系統(tǒng)，采用計(jì)算機(jī)分布式架構(gòu)和高效網(wǎng)絡(luò)傳輸技術(shù)，完成海量網(wǎng)絡(luò)數(shù)據(jù)可視化系統(tǒng)的總體架構(gòu)設(shè)計(jì)，并基于WEB全棧技術(shù)實(shí)現(xiàn)，本系統(tǒng)可對(duì)海量數(shù)據(jù)提供全面的可視化服務(wù)，有助于高效的、直觀的從數(shù)據(jù)中提取隱藏信息，進(jìn)而輔助制定決策。

附圖說(shuō)明

圖1是本發(fā)明具體實(shí)施例的系統(tǒng)架構(gòu)圖。

圖2是本發(fā)明具體實(shí)施例的MongoDB集群結(jié)構(gòu)圖。

圖3是本發(fā)明具體實(shí)施例的數(shù)據(jù)交換技術(shù)示意圖。

圖4是本發(fā)明具體實(shí)施例的可視化框架示意圖。

圖5是本發(fā)明具體實(shí)施例的系統(tǒng)前端架構(gòu)圖。

圖6是本發(fā)明具體實(shí)施例的流量數(shù)據(jù)示例圖。

圖7是本發(fā)明具體實(shí)施例的互聯(lián)網(wǎng)基礎(chǔ)數(shù)據(jù)統(tǒng)計(jì)數(shù)據(jù)圖。

圖8是本發(fā)明具體實(shí)施例的網(wǎng)絡(luò)安全事件監(jiān)測(cè)統(tǒng)計(jì)圖。

具體實(shí)施方式

下面，通過(guò)具體實(shí)施例對(duì)本發(fā)明的技術(shù)方案進(jìn)行詳細(xì)說(shuō)明。

實(shí)施例：

參照?qǐng)D1，本發(fā)明提出了一種網(wǎng)絡(luò)大數(shù)據(jù)可視化信息系統(tǒng)，系統(tǒng)分為三層，從下到上分別為數(shù)據(jù)庫(kù)層、數(shù)據(jù)交換層和應(yīng)用層；

數(shù)據(jù)庫(kù)層為系統(tǒng)提供數(shù)據(jù)支撐，用于存儲(chǔ)系統(tǒng)所需的原始數(shù)據(jù)、處理后的中間數(shù)據(jù)以及最終的展示數(shù)據(jù)。針對(duì)海量數(shù)據(jù)規(guī)模，單機(jī)數(shù)據(jù)庫(kù)的存儲(chǔ)空間和查詢效率無(wú)法滿足需求，因此需要建立數(shù)據(jù)庫(kù)集群，以提升系統(tǒng)性能。

數(shù)據(jù)交換層封裝了訪問(wèn)數(shù)據(jù)庫(kù)的操作，同時(shí)提供了Redis緩存，用于緩存常用的數(shù)據(jù)，提高應(yīng)用層讀取數(shù)據(jù)的效率。