[發明專利]一種具有檢測結構的大數據分析的數據收集系統

在審

• 申請號: 201911161927.2
• 申請日: 2019-11-25
• 公開（公告）號: CN110969013A
• 公開（公告）日: 2020-04-07
• 發明（設計）人: 李川;牟晉東;段翔
• 申請（專利權）人: 東莞理工學院
• 主分類號: G06F40/247
• 分類號: G06F40/247;G06F40/117;G06F21/56;H04L29/06
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明涉及一種具有檢測結構的大數據分析的數據收集系統，包括i5處理器和認證模塊，所述i5處理器的輸入端電性連接有操作系統，且i5處理器的輸出端電性連接有登錄系統，所述登錄系統的輸出端電性連接有認證模塊，且認證模塊的輸出端電性連接有實名登錄模塊，所述實名登錄模塊的輸入端分別電性連接有認證單元和審核單元，本發明通過登錄系統、登錄模塊和信譽評測系統的設置，使用者可通過登錄系統進行實名登錄，在登錄時需要通過認證單元和審核單元對申請人的身份進行審核，并且信譽評測系統對該用戶進行記錄，防止一些評測信譽低的用戶持續不間斷將一些垃圾信息傳輸至大數據內，導致數據庫存儲大量不必要的數據。

技術領域

本發明涉及大數據儲存技術領域，具體為一種具有檢測結構的大數據分析的數據收集系統。

背景技術

隨著大數據應用的爆發性增長，它已經衍生出了自己獨特的架構，而且也直接推動了存儲、網絡以及計算技術的發展，畢竟處理大數據這種特殊的需求是一個新的挑戰，硬件的發展最終還是由軟件需求推動的，就這個例子來說，我們很明顯的看到大數據分析應用需求正在影響著數據存儲基礎設施的發展，“大數據”通常指的是那些數量巨大、難于收集、處理、分析的數據集，亦指那些在傳統基礎設施中長期保存的數據，這里的“大”有幾層含義，它可以形容組織的大小，而更重要的是，它界定了企業中IT基礎設施的規模，業內對大數據應用寄予了無限的期望商業信息積累的越多價值也越大只不過我們需要一個方法把這些價值挖掘出來，大數據可通過互聯網與客戶之間直接架構一個數據收集系統，滿足大數據儲存的同時，也減輕數據收集的難度。

現有的數據收集系統在使用中無法對使用者的使用信譽進行記錄，導致一些極端使用者將錯誤信息、垃圾信息、病毒信息和色情信息通過數據收集系統一同記錄在大數據內，并且大數據中易出現大量重復數據，提高不必要的負荷，為此，我們提出一種具有檢測結構的大數據分析的數據收集系統。

發明內容

本發明的目的在于提供一種具有檢測結構的大數據分析的數據收集系統，以解決上述背景技術中提出的現有的數據收集系統在使用中無法對使用者的使用信譽進行記錄，導致一些極端使用者將錯誤信息、垃圾信息、病毒信息和色情信息通過數據收集系統一同記錄在大數據內，并且大數據中易出現大量重復數據，提高不必要的負荷的問題。

為實現上述目的，本發明提供如下技術方案：一種具有檢測結構的大數據分析的數據收集系統，包括i5處理器和認證模塊，所述i5處理器的輸入端電性連接有操作系統，且i5處理器的輸出端電性連接有登錄系統，所述登錄系統的輸出端電性連接有認證模塊，且認證模塊的輸出端電性連接有實名登錄模塊，所述實名登錄模塊的輸入端分別電性連接有認證單元和審核單元，且實名登錄模塊的輸出端電性連接有信譽評測系統，所述i5處理器的輸出端電性連接有第一儲存單元，且第一儲存單元的輸出端電性連接有分配系統，所述分配系統的輸出端分別電性連接有分類模塊和比對模塊，且分類模塊的輸出端電性連接有種類分類模塊，所述種類分類模塊的輸出端分別電性連接有區域分類模塊和名稱核對模塊，所述比對模塊的輸出端電性連接有檢測模塊，且檢測模塊的輸出端分別電性連接有垃圾粉碎單元、標注保護單元和整理排序單元，所述垃圾粉碎單元、標注保護單元、整理排序單元的輸出端電性連接有整合終端，且整合終端的輸出端電性連接有第二儲存單元。

優選的，所述實名登錄模塊與認證單元和審核單元電性并聯連接，且登錄模塊通過信譽評測系統與登錄系統電性串聯連接。

優選的，所述種類分類模塊與區域分類模塊和名稱核對模塊電性并聯連接，且種類分類模塊分別通過區域分類模塊和名稱核對模塊與比對模塊和整合終端電性串聯連接。

優選的，所述分配系統與分類模塊和比對模塊電性并聯連接，且分配系統分別與分類模塊和比對模塊電性串聯連接。

優選的，所述名稱核對模塊包括有相同詞標記單元、同義詞標記單元和關鍵字標記單元，且名稱核對模塊的輸出端分別電性連接有相同詞標記單元、同義詞標記單元和關鍵字標記單元。