[發明專利]自動化企業輿情監控方法、系統、存儲介質及電子設備在審
| 申請號： | 202110050617.4 | 申請日： | 2021-01-14 |
| 公開（公告）號： | CN112732997A | 公開（公告）日： | 2021-04-30 |
| 發明（設計）人： | 樂譽隆;郭健飛;陳建榮 | 申請（專利權）人： | 上海堯信惠達信息科技有限公司 |
| 主分類號： | G06F16/951 | 分類號： | G06F16/951;G06F16/958;G06F16/904;G06F16/215;G06F16/27 |
| 代理公司： | 北京中譽威圣知識產權代理有限公司 11279 | 代理人： | 李澤中 |
| 地址： | 201914 上海市崇明區橫*** | 國省代碼： | 上海;31 |
| 權利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關鍵詞： | 自動化 企業 輿情 監控 方法 系統 存儲 介質 電子設備 | ||
1.一種自動化企業輿情監控方法，其特征在于，包括：
數據獲取，針對目標企業于特定網站，獲取其對應表層網頁及深層網頁相關數據；
數據清洗，對獲取到的相關數據進行去除冗余操作，保留關鍵數據；
數據存儲，將所述關鍵數據進行存儲操作；以及
數據可視化，將存儲后的所述關鍵數據以多個模塊在可視化平臺進行展示。
2.如權利要求1所述的自動化企業輿情監控方法，其特征在于，所述數據獲取是基于深層網絡爬蟲技術實現的。
3.如權利要求1所述的自動化企業輿情監控方法，其特征在于，所述數據存儲是基于分布式數據存儲技術實現的。
4.如權利要求1所述的自動化企業輿情監控方法，其特征在于，所述數據清洗是通過編寫Python程序實現的，且所述數據清洗包括以下步驟：
檢查原表和產出表字段的匹配情況；
檢查字段是否有漂移情況；
檢查數據格式；以及
根據檢查情況進行相應的數據處理，包括刪除字段漂移的實例，刪除冗余字段，并將字段數據格式轉化成需要的數據格式，并提供標準化輸出。
5.一種自動化企業輿情監控系統，其特征在于，包括：
數據獲取組件，用以針對目標企業于特定網站，獲取其對應表層網頁及深層網頁相關數據；
數據清洗組件，對獲取到的相關數據進行去除冗余操作，保留關鍵數據；
數據存儲組件，將所述關鍵數據進行存儲操作；以及
數據可視化組件，將存儲后的所述關鍵數據以多個模塊在可視化平臺進行展示。
6.如權利要求5所述的自動化企業輿情監控系統，其特征在于，所述數據獲取組件是基于深層網絡爬蟲技術實現的。
7.如權利要求5所述的自動化企業輿情監控系統，其特征在于，所述數據存儲組件是基于分布式數據存儲技術實現的。
8.如權利要求5所述的自動化企業輿情監控方法，其特征在于，所述數據清洗組件是通過編寫Python程序實現的，且所述數據清洗組件的清洗步驟包括以下步驟：
檢查原表和產出表字段的匹配情況；
檢查字段是否有漂移情況；
檢查數據格式；以及
根據檢查情況進行相應的數據處理，包括刪除字段漂移的實例，刪除冗余字段，并將字段數據格式轉化成需要的數據格式，并提供標準化輸出。
9.一種存儲介質，其特征在于，所述存儲介質存儲有計算機可執行指令，所述計算機可執行指令用于執行權利要求1-4任意一項所述的自動化企業輿情監控方法。
10.一種電子設備，其特征在于，包括：
至少一個處理器；以及，
與所述至少一個處理器通信連接的存儲器；其中，
所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行權利要求1-4任意一項所述的自動化企業輿情監控方法。
該專利技術資料僅供研究查看技術是否侵權等信息，商用須獲得專利權人授權。該專利全部權利屬于上海堯信惠達信息科技有限公司，未經上海堯信惠達信息科技有限公司許可，擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作，請聯系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202110050617.4/1.html，轉載請聲明來源鉆瓜專利網。
