[發明專利]一種能夠自動采集分析的網絡輿情檢測系統

在審

• 申請號: 202210854121.7
• 申請日: 2022-07-13
• 公開（公告）號: CN115409240A
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 王亓彬;王晶晶
• 申請（專利權）人: 南昌工學院
• 主分類號: G06Q10/04
• 分類號: G06Q10/04;G06Q50/00;G06F16/951;G06F16/9536;G06F40/205
• 代理公司: 北京奧肯律師事務所 11881
• 代理人: 周桐

本發明提供了一種能夠自動采集分析的網絡輿情檢測系統，網絡輿情檢測系統包括：數據采集層，數據采集單元采集各大熱門網站的資源信息；分析處理層，采集到的輿情數據進行處理分析；應用服務層，當前的網絡輿情進行判斷；本發明在現有的網絡輿情預測方法基礎上，通過主成分分析的網絡輿情快速預測方法，利用主成分分析對網絡輿情指標進行降維處理，保留其絕大部分信息的基礎上，減少預測的復雜度，從而縮短預測過程所需要的時間，同時，本申請還可將主成分分析方法與多種預測模型結合起來使用，減少數據之間的相關性和冗余性，借以減少預測過程的時間消耗，提高預測速度，實現快速精準的預測輿情信息。

技術領域

本發明屬于網絡輿檢測技術領域，涉及一種能夠自動采集分析的網絡輿情檢測系統。

背景技術

在互聯網影響力日益增大的今天，社會各界對網絡輿情愈來愈重視，網絡具有開放性、匿名性，與傳統的通訊方式相比較，民眾更愿意在互聯網上發表自己的觀點。網絡輿情具有傳播速度快、范圍廣等特點，隨著網民數量的增多，網絡輿情的影響力也日益增大，但由于我國目前對網絡輿情管理的規章制度還不完善，缺少現實社會的有效監管和限制。因此，加強對網絡輿情的預測和預警，營造一個良好、通暢的網絡平臺對緩解社會矛盾，促進社會和諧有重要意義，目前影響網絡輿情預測準確性的因素中,輿情指標的數據量過于龐大是一個重要的原因，因此如何有效地網絡輿情指標數據的特征，使之既能降低特征空間的維數，又能很好的用于網絡輿情預測當中，是一個重要而又實際的問題，需要進行改進。

發明內容

本發明的目的在于提供一種能夠自動采集分析的網絡輿情檢測系統，以解決上述背景技術中提出的問題。

本發明的目的可通過下列技術方案來實現：

一種能夠自動采集分析的網絡輿情檢測系統，用于對網絡熱點輿情進行采集和檢測，所述網絡輿情檢測系統包括：

數據采集層，通過數據采集單元采集各大熱門網站的資源信息，從而便于分析處理層進行輿情數據分析；

分析處理層，對采集到的輿情數據進行處理分析，從而為應用服務層提供數據支撐；

應用服務層，通過分析處理層處理后的輿情數據，對當前的網絡輿情進行判斷，并預測輿情的下一步發展。

在上述的一種能夠自動采集分析的網絡輿情檢測系統中，所述數據采集層包括數據采集單元、參數設置單元和數據解析單元，其中，各單元的功能如下：

數據采集單元：通過數據采集單元對網絡輿情進行數據收集，設置采集端口，數據采集單元根據設置的采集端口進行自動爬取；

參數設置單元：對數據采集單元的抓取參數進行設置，主要內容包括兩個方面，爬取目標和存儲單元，設置抓取黑名單和抓取白名單，數據采集單元從白名單進行數據抓取；

數據解析單元：在采集端口中，會對所發布的資源信息進行記錄，包括瀏覽次數、轉載次數、發布信息等，其中存在很多的重復性內容，通過數據解析單元對各個數據內容進行分解，去除重復性內容，保留具有價值的信息，并對采集信息進行分類處理。

在上述的一種能夠自動采集分析的網絡輿情檢測系統中，參數采集單元中，在對爬取目標進行設定時，需要對爬取過程、爬取效果等進行設置，并根據實際需要來設計爬取名單，僅對白名單上的內容進行工作，可以減少不必要的環節，從而保證工作質量和效率。

在上述的一種能夠自動采集分析的網絡輿情檢測系統中，所述存儲單元為主存儲區和多個分存儲區，且多個白名單與分存儲區一一對應，所述分存儲區內部的數據經過處理后匯總進入主存儲區。

在上述的一種能夠自動采集分析的網絡輿情檢測系統中，所述分析處理層包括輿論判定單元、輿論跟蹤單元、輿論評估單元和輿論報告單元，其中，