[發明專利]一種互聯網大數據分析提取方法及系統

在審

• 申請號: 201811315842.0
• 申請日: 2018-11-07
• 公開（公告）號: CN109344333A
• 公開（公告）日: 2019-02-15
• 發明（設計）人: 鐘文洪
• 申請（專利權）人: 樂甜人工智能科技(廣州)有限公司
• 主分類號: G06F16/9535
• 分類號: G06F16/9535;G06F16/903;G06F16/906;G06F21/60
• 代理公司: 南京鼎傲知識產權代理事務所(普通合伙) 32327
• 代理人: 王晶

本發明公開了一種互聯網大數據分析提取方法及系統，分析提取方法包括以下步驟：A、數據采集單元采集互聯網大數據；B、采集的數據經過數據篩選模塊進行篩選后發送至控制單元進行處理；C、控制單元向數據特征提取模塊發送指令，對篩選后的數據根據預先設置的關鍵字進行特征提取；D、特征提取后的數據通過數據加密單元進行加密后存儲；E、最后提取后的互聯網數據通過數據傳輸單元傳輸至后臺終端，本發明采用的方法操作簡單，安全性能高，另外，通過對數據進行篩選，篩選后進行特征提取，能夠提高互聯網大數據的分析提取效率和準確度，而且降低了人工成本，提高了工作效率，此外，能夠實現對收進行加密后存儲，確保了數據安全性。

技術領域

本發明涉及數據提取技術領域，具體為一種互聯網大數據分析提取方法及系統。

背景技術

自古以來人們就深知信息的重要性，擁有更多和更精準的信息就能獲得優勢，隨著社會的不斷進步，信息越來越多樣化，且數量也是成倍的增長，大數據的概念也隨之提出，從龐雜的數據中，提取所需的數據進行分析，得到直觀的信息，以此來占據先機，獲取利益。

大數據,或稱巨量數據、海量數據;是由數量巨大、結構復雜、類型眾多數據構成的數據集合,是基于云計算的數據處理與應用模式,通過數據的集成共享,交叉復用形成的智力資源和知識服務能力。有研究機構如此定義“大數據”:“大數據”是需要新處理模式才能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產。從某種程度上說,大數據是數據分析的前沿技術。簡言之,從各種各樣類型的數據中,快速獲得有價值信息的能力,就是大數據技術。現有技術中互聯網大數據分析和提取一般通過互聯網數據平臺自動進行提取和分析，其雖然能夠實現對互聯網大數據的提取并分析，但是互聯網數據平臺功能單一，導致提取效率低，而且安全性能差，容易造成數據泄露，因此，有必要進行改進。

發明內容

本發明的目的在于提供一種互聯網大數據分析提取方法及系統，以解決上述背景技術中提出的問題。

為實現上述目的，本發明提供如下技術方案：一種互聯網大數據分析提取方法，分析提取方法包括以下步驟：

A、數據采集單元采集互聯網大數據；

B、采集的數據經過數據篩選模塊進行篩選后發送至控制單元進行處理；

C、控制單元向數據特征提取模塊發送指令，對篩選后的數據根據預先設置的關鍵字進行特征提取；

D、特征提取后的數據通過數據加密單元進行加密后存儲；

E、最后提取后的互聯網數據通過數據傳輸單元傳輸至后臺終端。

優選的，所述步驟B中數據篩選模塊方法如下：

a、從待篩選數據中提取多個噪聲數據作為樣本數據；

b、對各所述樣本數據進行變換處理，得到各所述樣本數據的變換數據；

c、通過預先訓練好的數據分類模型，對各所述樣本數據及各所述變換數據進行標簽預測，確定各樣本數據的目標標簽和目標標簽概率；

d、根據各樣本數據的目標標簽及目標標簽概率，對各樣本數據進行篩選，獲得目標數據。

優選的，所述步驟D中數據加密方法如下：

a、首先對待加密的數據進行清洗操作；

b、之后對清洗后的數據進行AES加密算法運算，得到加密后的一次密文數據；

c、之后對一次密文數據再次進行超混沌加密運算，得到二次密文數據；

d、最后對二次密文數據進行進行DES加密運算，完成對數據的最終加密。

優選的，所述數據特征提取模塊特征提取方法如下：