[發明專利]自動化企業輿情監控方法、系統、存儲介質及電子設備

在審

• 申請號: 202110050617.4
• 申請日: 2021-01-14
• 公開（公告）號: CN112732997A
• 公開（公告）日: 2021-04-30
• 發明（設計）人: 樂譽隆;郭健飛;陳建榮
• 申請（專利權）人: 上海堯信惠達信息科技有限公司
• 主分類號: G06F16/951
• 分類號: G06F16/951;G06F16/958;G06F16/904;G06F16/215;G06F16/27
• 代理公司: 北京中譽威圣知識產權代理有限公司 11279
• 代理人: 李澤中

本發明公開了一種自動化企業輿情監控方法、系統、存儲介質及電子設備，其中自動化企業輿情監控方法包括：數據獲取，針對目標企業于特定網站，獲取其對應表層網頁及深層網頁相關數據。數據清洗，對獲取到的相關數據進行去除冗余操作，保留關鍵數據。數據存儲，將關鍵數據進行存儲操作。以及數據可視化，將存儲后的關鍵數據以多個模塊在可視化平臺進行展示。借此，本發明的自動化企業輿情監控方法，效率高，且準確性高。

技術領域

本發明是關于一種自動化企業輿情監控方法、系統、存儲介質及電子設備。

背景技術

隨著監管機構對互聯網金融市場監管收緊，對金融公司的風控管理要求愈發的趨于嚴厲，傳統融資擔保業務模式的風控管理已不滿足于現有的監管要求，線上融資業務模式(資產方+擔保方+資金方)已成為市場的主力軍。在該業務模式下，為了更好的做好風控管理，防范于異常狀況發生，所以對機構的輿情監控成為一種重要的風控手段。

當下對企業的輿情監控方式多為人工手動方式，定期對機構進行網絡搜索，篩選，匯總后輸出分析報告，這種方式不僅耗時耗力，效率低下且無法保證輿情的實效性，而且輿情的準確度極度依賴分析人員的技能水平，導致輸出報告層次不齊無法做到穩定一致，對監控準確度大打折扣。

公開于該背景技術部分的信息僅僅旨在增加對本發明的總體背景的理解，而不應當被視為承認或以任何形式暗示該信息構成已為本領域一般技術人員所公知的現有技術。

發明內容

本發明的目的在于提供一種自動化企業輿情監控方法、系統、存儲介質及電子設備，其效率高，且準確性高。

為實現上述目的，本發明一方面提供了一種自動化企業輿情監控方法包括：數據獲取，針對目標企業于特定網站，獲取其對應表層網頁及深層網頁相關數據。數據清洗，對獲取到的相關數據進行去除冗余操作，保留關鍵數據。數據存儲，將關鍵數據進行存儲操作。以及數據可視化，將存儲后的關鍵數據以多個模塊在可視化平臺進行展示。

在本發明的一實施方式中，數據獲取是基于深層網絡爬蟲技術實現的。

在本發明的一實施方式中，數據存儲是基于分布式數據存儲技術實現的。

在本發明的一實施方式中，數據清洗是通過編寫Python程序實現的，且所述數據清洗包括以下步驟：檢查原表和產出表字段的匹配情況；檢查字段是否有漂移情況；檢查數據格式；以及根據檢查情況進行相應的數據處理，包括刪除字段漂移的實例，刪除冗余字段，并將字段數據格式轉化成需要的數據格式，并提供標準化輸出。

本發明另一方面提供了一種自動化企業輿情監控系統，包括：數據獲取組件、數據清洗組件、數據存儲組件以及數據可視化組件。數據獲取組件用以針對目標企業于特定網站，獲取其對應表層網頁及深層網頁相關數據。數據清洗組件對獲取到的相關數據進行去除冗余操作，保留關鍵數據。數據存儲組件將關鍵數據進行存儲操作。以及數據可視化組件將存儲后的關鍵數據以多個模塊在可視化平臺進行展示。

在本發明的一實施方式中，數據獲取組件是基于深層網絡爬蟲技術實現的。

在本發明的一實施方式中，數據存儲是基于分布式數據存儲技術實現的。

在本發明的一實施方式中，數據清洗組件是通過編寫Python程序實現的，且數據清洗組件的清洗步驟包括以下步驟：檢查原表和產出表字段的匹配情況；檢查字段是否有漂移情況；檢查數據格式；以及根據檢查情況進行相應的數據處理，包括刪除字段漂移的實例，刪除冗余字段，并將字段數據格式轉化成需要的數據格式，并提供標準化輸出。

與現有技術相比，根據本發明的自動化企業輿情監控方法、系統、存儲介質及電子設備，其效率高，時效性高，且準確性高。

附圖說明

圖1是根據本發明一實施方式的自動化企業輿情監控方法的流程示意圖；