[發明專利]移動式現場大數據分析平臺

在審

• 申請號: 202110420446.X
• 申請日: 2021-04-19
• 公開（公告）號: CN113051234A
• 公開（公告）日: 2021-06-29
• 發明（設計）人: 楊良斌;于臘梅
• 申請（專利權）人: 國際關系學院
• 主分類號: G06F16/16
• 分類號: G06F16/16;G06F16/13;G06F16/172;G06F16/14
• 代理公司: 北京沃知思真知識產權代理有限公司 11942
• 代理人: 高小艷

本發明公開了移動式現場大數據分析平臺，屬于大數據分析技術領域，包括數據搜索模塊、數據源數據抓取模塊、數據收集存儲模塊、數據分析模塊、數據存儲云端、數據轉換模塊、數據顯示模塊以及數據選擇模塊，其中，所述數據搜索模塊與數據源數據抓取模塊通信連接，所述數據收集存儲模塊與數據源數據抓取模塊、數據分析模塊通信連接；本發明通過刪除數據中存在的垃圾信息，方便使用者查看數據，保護網絡環境，將數據按找時間從新到舊進行排序，方便工作人員查詢最新數據，節省工作人員的查詢時間，提高工作效率。

技術領域

本發明涉及大數據分析技術領域，尤其涉及移動式現場大數據分析平臺。

背景技術

大數據分析是指對規模巨大的數據進行分析，大數據可以概括為5個V，數據量大(Volume)、速度快(Velocity)、類型多(Variety)、價值(Value)以及真實性(Veracity)，大數據作為時下最火熱的IT行業的詞匯，隨之而來的數據倉庫、數據安全、數據分析、數據挖掘等等圍繞大數據的商業價值的利用逐漸成為行業人士爭相追捧的利潤焦點，隨著大數據時代的來臨，大數據分析也應運而生，高效的數據和分析能力將確保最佳的欺詐預防水平，提升整個企業機構的安全，，以便企業快速檢測并預測欺詐活動，同時識別和跟蹤肇事者；因此，發明出移動式現場大數據分析平臺變得尤為重要；

經檢索，中國專利號CN109086396A公開了養老大數據分析平臺，該發明雖然可以實時的用多種可視化的方式展示數據變化情況，但無法對多余信息進行過濾處理，影響使用者查看數據，危害網絡環境，其次，現有的移動式現場大數據分析平臺無法對數據按照時間前后進行有序排序，工作人員查找數據是常常會查詢到過于老舊的數據，浪費工作人員的查詢時間，降低工作效率，為此，我們提出了移動式現場大數據分析平臺。

發明內容

本發明的目的是為了解決現有技術中存在的缺陷，而提出的移動式現場大數據分析平臺。

為了實現上述目的，本發明采用了如下技術方案：

移動式現場大數據分析平臺，包括數據搜索模塊、數據源數據抓取模塊、數據收集存儲模塊、數據分析模塊、數據存儲云端、數據轉換模塊、數據顯示模塊以及數據選擇模塊；

其中，所述數據搜索模塊與數據源數據抓取模塊通信連接，所述數據收集存儲模塊與數據源數據抓取模塊、數據分析模塊通信連接，所述數據分析模塊與數據存儲云端、數據轉換模塊通信連接，所述數據顯示模塊與數據轉換模塊、數據選擇模塊通信連接；

所述數據搜索模塊包括數據輸入模塊以及查詢信息處理模塊；

所述數據收集存儲模塊包括數據收集單元、數據分類單元以及數據存儲單元；

所述數據分析模塊包括數據分析單元與文件轉換單元。

進一步地，所述數據輸入單元用于使用者輸入與所需查詢數據對應的關鍵字并通過數據轉換生成搜索數據，所述查詢信息處理單元用于接收搜索信息并對其進行判斷分析處理生成查找數據，其具體判斷分析步驟如下：

步驟一：若查找數據符合數據查找規范，則將其處理生成查找數據；

步驟二：若查找數據不符合數據查找規范，則將反饋用戶數據查詢格式錯誤。

進一步地，所述數據源數據抓取模塊用于接收查找數據并開始從不同數據源上抓取數據將其處理生成初始數據，其中，不同數據源包括ODBC、C3P0以及DBCP。

進一步地，所述數據收集單元用于接收初始數據并按照數據字典的定義轉換成篩選數據，數據分類單元用于接收篩選數據并及進行分類清洗處理生成模板數據，其具體分類清洗步驟如下：

步驟(1)：將篩選數據按照不同類型進行分類處理，其中不同類型包括文章、視頻以及垃圾廣告，同時將分類完成的篩選數據分別標記為A、B、C；