[發明專利]一種基于網絡安全的大數據實施系統及方法

有效

• 申請號: 201710792580.6
• 申請日: 2017-09-05
• 公開（公告）號: CN107528852B
• 公開（公告）日: 2020-07-31
• 發明（設計）人: 李鑫;周湘貞;任剛;胡廣新;張鴻;周飛菲
• 申請（專利權）人: 鄭州升達經貿管理學院
• 主分類號: H04L29/06
• 分類號: H04L29/06;H04L12/26;G06F21/62
• 代理公司: 西安銘澤知識產權代理事務所(普通合伙) 61223
• 代理人: 李振瑞

本發明公開了一種基于網絡安全的大數據實施系統及方法。該系統的大數據實施平臺包括：大數據采集模塊、大數據預處理模塊、大數據處理模塊、網絡安全監管模塊和控制器；網絡安全監管模塊包括：網絡檢測單元、訪客驗證單元和訪問流量監控單元。本發明通過帶多種數據接口的數據接受器并行采集多路數據，并對幀打包數據添加優先權編號和幀號，同時對采集的數據分級存儲，從而按照優先權編號和幀號對存儲的數據解析篩選后輸出；即在大數據實施過程中，通過多個通道采集數據，不但采集效率高，且采集數據量大；對分級存儲后的數據按照優先權編號和幀號輸出，使數據傳輸有序，不易造成網絡堵塞和數據丟失，提高了數據處理效率低，資源利用率低。

技術領域

本發明涉及網絡安全技術領域，更具體的涉及一種基于網絡安全的大數據實施系統及方法。

背景技術

隨著電子信息技術的發展，人們使用網絡的頻率越來越高，數據量的飛速增長預示著現在已經進入了大數據時代，不僅是數據規模越來越大，而且數據類型多和處理實時性要求高。大數據提出的同時，人們也逐漸體會到信息高速發展帶來的隱患，安全問題成為網絡瀏覽的重要問題，隱私泄露、財產被騙等等，即大數據給傳統的數據安全傳輸管理帶來了技術挑戰。

現有的大數據實施過程中，往往是將數據都集中到一起后，再進行分類，造成后期工作量大，因數據量巨大，造成接收數據時網絡堵塞，從而存在數據丟失的問題，使得數據處理效率低，資源利用率低。

綜上所述，現有技術中的大數據實施過程，存在數據處理效率低，資源利用率低的問題。

發明內容

本發明實施例提供一種基于網絡安全的大數據實施系統及方法，用以解決現有技術中存在數據處理效率低，資源利用率低的問題。

本發明實施例提供一種基于網絡安全的大數據實施系統，包括：大數據實施平臺；

所述大數據實施平臺，包括：大數據采集模塊、大數據預處理模塊、大數據處理模塊、網絡安全監管模塊和控制器；

所述大數據采集模塊，用于通過帶多種數據接口的數據接受器并行采集多路數據，并對各路數據進行幀數據打包且對各路數據每幀的幀頭添加優先權編號和幀號；

所述大數據預處理模塊，用于按照各路數據傳輸協議對各路數據進行冗余處理和校驗處理，將冗余處理和校驗處理后的數據存儲至各路數據接受緩存器和數據接受存儲器；其中，將前十幀數據存儲至數據接受緩存器中，以及將前十幀以后的數據存儲至數據接受存儲器中；當數據接受緩存器中的數據不足十幀時，數據接受存儲器中的數據自動向數據接受緩存器中傳輸；

所述大數據處理模塊，用于根據優先權編號和幀號將待傳輸數據從數據接受緩存器中取出，并解析數據信息將篩選出的有用數據按照優先權編號和幀號輸出；其中，根據上一幀待傳輸數據取出完成標志從數據接受緩存器中取出下一幀待傳輸數據；將解析后的數據信息與預存的攔截信息進行對比，當重合度小于第一預設值時的解析后的數據信息為有用信息；

所述網絡安全監管模塊，包括：網絡檢測單元、訪客驗證單元和訪問流量監控單元；

所述網絡檢測單元，用于實時對各路數據傳輸通道的網絡傳輸速率和資源占用率進行檢測；

所述訪客驗證單元，用于通過賬戶、密碼和二維碼對網絡大數據進行訪問；其中，通過賬戶和密碼進行身份驗證，通過二維碼對某些網絡數據的訪問進行付費驗證；

所述訪問流量監控單元，用于實時監測各路數據傳輸通道的網絡數據訪問流量，當某一通道的網絡數據訪問流量超出第二預設值時，向該通道增加網絡流量，同時根據網絡數據訪問流量的大小確定熱點數據類型；

所述控制器，用于協調上述各模塊運行。

較佳地，所述大數據實施平臺為大數據服務器。