[發明專利]輿情分析方法及相關產品

在審

• 申請號: 202210052820.X
• 申請日: 2022-01-18
• 公開（公告）號: CN114491207A
• 公開（公告）日: 2022-05-13
• 發明（設計）人: 趙樂
• 申請（專利權）人: 平安普惠企業管理有限公司
• 主分類號: G06F16/951
• 分類號: G06F16/951;G06F40/30;G06F16/35;G06N3/02
• 代理公司: 廣州三環專利商標代理有限公司 44202
• 代理人: 陳倩倩

本申請實施例公開了一種輿情分析方法及相關產品。該方法包括：通過數據處理裝置爬取多個網頁數據以及將多個網頁數據發布到消息隊列；通過第一服務器從消息隊列中消費第一部分網頁數據，并將部分網頁數據離線存儲到第一數據庫；通過第一流計算引擎從消息隊列第二部分網頁數據，對第二部分網頁數據進行輿情分析，得到第二部分網頁數據的輿情分析結果，將第二部分網頁數據的輿情分析結果存儲到第二數據庫；通過第二流計算引擎從第一數據庫中獲取第一部分網頁數據，對第一部分網頁數據進行輿情分析，得到第一部分網頁數據的輿情分析結果，將第一部分網頁數據的輿情分析結果存儲到第二數據庫；通過第二服務器將輿情分析結果同步到搜索引擎。

技術領域

本申請涉及大數據技術領域，具體涉及一種輿情分析方法及相關產品。

背景技術

互聯網的飛速發展促進了很多新媒體的發展，不論是熱點網頁數據還是娛樂八卦，傳播速度遠超我們的想象。可以在短短數分鐘內，有數萬計轉發，數百萬的閱讀。如此海量的信息可以得到爆炸式的傳播，如何能夠實時的把握民情并作出對應的處理對很多企業來說都是至關重要的。

目前，輿情分析都是先搜集輿情數據，然后再對輿情數據進行數據處理、文本分析等一系列操作之后才能得到輿情，這種處理方式單一，效率低，不能滿足市場需求。尋找一種靈活多變，處理效率高的輿情分析方法是目前亟待解決的技術問題。

發明內容

本申請實施例提供了一種輿情分析方法及相關產品，通過離線和實時進行輿情分析，增加了輿情分析的方式，提高了輿情分析效率。

第一方面，本申請實施例提供一種輿情分析方法，所述方法應用于輿情分析系統，所述輿情分析系統包括：數據處理裝置、消息隊列、第一流計算引擎、第一服務器、第二流計算引擎、第二服務器以及搜索引擎，所述第一服務器維護第一數據庫，所述第二服務器維護第二數據庫；所述方法包括：

通過所述數據處理裝置爬取多個網頁數據；

通過所述數據處理裝置將所述多個網頁數據發布到所述消息隊列；

通過所述第一服務器從所述消息隊列中消費所述多個網頁數據中的第一部分網頁數據，并將所述第一部分網頁數據離線存儲到所述第一數據庫；

通過所述第一流計算引擎從所述消息隊列中消費所述多個網頁數據中的第二部分網頁數據，對所述第二部分網頁數據進行輿情分析，得到所述第二部分網頁數據的輿情分析結果，并將所述第二部分網頁數據的輿情分析結果存儲到所述第二數據庫；

通過所述第二流計算引擎從所述第一數據庫中獲取所述第一部分網頁數據，并對所述第一部分網頁數據進行輿情分析，得到所述第一部分網頁數據的輿情分析結果，并將所述第一部分網頁數據的輿情分析結果存儲到所述第二數據庫；

通過所述第二服務器對所述第一部分網頁數據的輿情分析結果，以及所述第二部分網頁數據的輿情分析結果進行整合，得到所述多個網頁數據的輿情分析結果，并將所述多個網頁數據的輿情分析結果同步到所述搜索引擎。

第二方面，本申請實施例提供一種輿情分析系統，所述輿情分析系統包括：數據處理裝置、消息隊列、第一流計算引擎、第一服務器、第二流計算引擎、第二服務器以及搜索引擎，所述第一服務器維護第一數據庫，所述第二服務器維護第二數據庫；

所述數據處理裝置，用于爬取多個網頁數據，將所述多個網頁數據發布到消息隊列；

所述第一服務器，用于從所述消息隊列中消費所述多個網頁數據中的第一部分網頁數據，并將所述部分網頁數據離線存儲到所述第一數據庫；

所述第一流計算引擎，用于從消息隊列中消費所述多個網頁數據中的第二部分網頁數據，對所述第二部分網頁數據進行輿情分析，得到所述第二部分網頁數據的輿情分析結果，并將所述第二部分網頁數據的輿情分析結果存儲到所述第二數據庫；