[發(fā)明專利]一種輿情分析系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202211314749.4
• 申請日: 2022-10-26
• 公開（公告）號: CN115599981A
• 公開（公告）日: 2023-01-13
• 發(fā)明（設(shè)計(jì)）人: 單建煒;陳陽
• 申請（專利權(quán)）人: 蘇州瑞泰信息技術(shù)有限公司
• 主分類號: G06F16/951
• 分類號: G06F16/951;G06F16/245;G06F16/248;G06F16/28;G06F16/81;G06F16/84;G06F40/30;G06Q30/02;G06Q50/00
• 代理公司: 北京科家知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11427
• 代理人: 曹振中

1.一種輿情分析系統(tǒng)，其特征在于，包括：

數(shù)據(jù)收集模塊(1)，用于獲取網(wǎng)站頁面HTML數(shù)據(jù)；

數(shù)據(jù)解析模塊(2)，用于解析數(shù)據(jù)收集模塊(1)獲取的網(wǎng)站頁面HTML數(shù)據(jù)；

數(shù)據(jù)存儲模塊(3)，用于存儲數(shù)據(jù)解析模塊(2)解析得到的數(shù)據(jù)；

數(shù)據(jù)分析模塊(4)，用于對數(shù)據(jù)存儲模塊(3)中存在的數(shù)據(jù)進(jìn)行分析；以及

數(shù)據(jù)展示模塊(5)，用于進(jìn)行用戶評論匯總展示、云圖展示等工作。

2.根據(jù)權(quán)利要求1所述的一種輿情分析系統(tǒng)，其特征在于：所述數(shù)據(jù)收集模塊(1)包括開源包requests(6)，該開源包requests(6)用于HTTP請求，以獲取網(wǎng)站頁面數(shù)據(jù)。

3.根據(jù)權(quán)利要求1所述的一種輿情分析系統(tǒng)，其特征在于：所述數(shù)據(jù)解析模塊(2)包括：

開源爬蟲框架Scrapy(7)，所述開源爬蟲框架Scrapy(7)用于抓取web站點(diǎn)并從頁面中提取結(jié)構(gòu)化的數(shù)據(jù)；

開源包fontTools.ttLib(8)，所述開源包fontTools.ttLib(8)用于對網(wǎng)站頁面編碼字體進(jìn)行解碼；

開源包lxml(9)，用于獲取網(wǎng)頁中的標(biāo)簽內(nèi)容；

開源包os(10)，用于對文件的操作，例如讀取Azure相關(guān)配置；以及

開源包json(11)，用于對Json字符串的序列化、反序列化。

4.根據(jù)權(quán)利要求1所述的一種輿情分析系統(tǒng)，其特征在于：所述數(shù)據(jù)存儲模塊(3)包括用于存儲數(shù)據(jù)至csv文件的開源包c(diǎn)sv(12)以及用于超大規(guī)模的數(shù)據(jù)存儲的開源關(guān)系數(shù)據(jù)庫(13)。

5.根據(jù)權(quán)利要求1所述的一種輿情分析系統(tǒng)，其特征在于：所述數(shù)據(jù)分析模塊(4)包括：

開源包azure.core.credentials(14)，用于提供Azure授權(quán)的API；以及

開源包azure.ai.textanalytics(15)，用于提供文本分析的API。

6.根據(jù)權(quán)利要求4所述的一種輿情分析系統(tǒng)，其特征在于：所述數(shù)據(jù)展示模塊(5)包括軟件服務(wù)Power BI(16)，該軟件服務(wù)Power BI(16)用于讀取存儲在開源關(guān)系數(shù)據(jù)庫(13)中的用戶言論數(shù)據(jù)，并匯總展示用戶言論數(shù)據(jù)的語言分析。