[發(fā)明專利]一種多租戶網(wǎng)絡(luò)輿情監(jiān)控方法及系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201110390588.2
• 申請(qǐng)日: 2011-11-30
• 公開（公告）號(hào): CN103139256A
• 公開（公告）日: 2013-06-05
• 發(fā)明（設(shè)計(jì)）人: 張丹;楊建武;梁汝峰;孫紅娥;王松
• 申請(qǐng)（專利權(quán)）人: 北大方正集團(tuán)有限公司;北京大學(xué);北京北大方正電子有限公司
• 主分類號(hào): H04L29/08
• 分類號(hào): H04L29/08;G06F17/30
• 代理公司: 北京天悅專利代理事務(wù)所(普通合伙) 11311
• 代理人: 田明;任曉航

1.一種多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于，包括以下步驟：

(1)采集網(wǎng)頁(yè)數(shù)據(jù)，提取并存儲(chǔ)所述網(wǎng)頁(yè)數(shù)據(jù)中的元數(shù)據(jù)和正文，并將存儲(chǔ)后的所述元數(shù)據(jù)和所述正文相關(guān)聯(lián)；

(2)檢索所述元數(shù)據(jù)和正文；

(3)分析所述正文是否符合預(yù)先設(shè)置的租戶輿情監(jiān)控規(guī)則和特征詞庫(kù)，如果符合，則將該正文分配給該租戶。

2.如權(quán)利要求1所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于，步驟(1)中所述采集網(wǎng)頁(yè)數(shù)據(jù)的方法如下：

①確定需要采集的網(wǎng)站列表，生成采集任務(wù)；

②檢測(cè)各采集服務(wù)器的使用情況，分析各采集服務(wù)器的壓力，將采集任務(wù)分發(fā)給壓力最小的采集服務(wù)器；

③采集服務(wù)器采集網(wǎng)頁(yè)數(shù)據(jù)。

3.如權(quán)利要求2所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于：所述采集任務(wù)包括采集網(wǎng)站的名稱、鏈接地址、任務(wù)的采集深度和掃描頻率信息。

4.如權(quán)利要求1所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于：步驟(1)中所述元數(shù)據(jù)存儲(chǔ)在數(shù)據(jù)庫(kù)中，所述正文以文件形式存儲(chǔ)在分布式文件系統(tǒng)中。

5.如權(quán)利要求1所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于：步驟(1)中通過(guò)建立全文檢索索引庫(kù)將所述元數(shù)據(jù)和與其對(duì)應(yīng)的正文相關(guān)聯(lián)。

6.如權(quán)利要求5所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于：步驟(2)中利用分布式全文檢索技術(shù)通過(guò)所述全文檢索索引庫(kù)對(duì)所述元數(shù)據(jù)及其對(duì)應(yīng)的正文的全文進(jìn)行檢索。

7.如權(quán)利要求1～6中任一項(xiàng)所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于，所述方法還包括以下步驟：為不同租戶建立不同賬號(hào)，根據(jù)不同租戶的租戶ID為租戶建立不同的用于存儲(chǔ)租戶輿情監(jiān)控業(yè)務(wù)規(guī)則和租戶所關(guān)心的輿情信息數(shù)據(jù)表，各租戶之間的輿情監(jiān)控業(yè)務(wù)規(guī)則不可見。

8.如權(quán)利要求7所述的一種多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于：步驟(3)中，將符合租戶輿情監(jiān)控規(guī)則和特征詞庫(kù)的正文存儲(chǔ)在該租戶的輿情信息數(shù)據(jù)表中。

9.如權(quán)利要求1～6中任一項(xiàng)所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控方法，其特征在于：步驟(3)中，定時(shí)分析所述正文是否符合預(yù)先設(shè)置的租戶輿情監(jiān)控規(guī)則和特征詞庫(kù)。

10.一種多租戶網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，包括用于采集網(wǎng)頁(yè)數(shù)據(jù)，提取并存儲(chǔ)所述網(wǎng)頁(yè)數(shù)據(jù)中的元數(shù)據(jù)和正文，并將存儲(chǔ)后的所述元數(shù)據(jù)和所述正文相關(guān)聯(lián)的采集裝置(11)；

用于檢索所述元數(shù)據(jù)和正文的檢索裝置(12)；

用于分析所述正文是否符合預(yù)先設(shè)置的租戶輿情監(jiān)控規(guī)則和特征詞庫(kù)，如果符合，則將該正文分配給該租戶的分析裝置(13)。

11.如權(quán)利要求10所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，其特征在于：所述采集裝置(11)包括用于采集網(wǎng)頁(yè)數(shù)據(jù)的采集單元(111)；用于提取網(wǎng)頁(yè)數(shù)據(jù)中的元數(shù)據(jù)和正文的提取單元(112)；用于存儲(chǔ)網(wǎng)頁(yè)數(shù)據(jù)中的元數(shù)據(jù)和正文的存儲(chǔ)單元(113)；用于將存儲(chǔ)后的元數(shù)據(jù)和正文相關(guān)聯(lián)的關(guān)聯(lián)單元(114)。

12.如權(quán)利要求11所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，其特征在于：所述采集單元(111)包括用于確定需要采集的網(wǎng)站列表并生成采集任務(wù)的任務(wù)生成器(1111)；

用于檢測(cè)各采集服務(wù)器的使用情況，分析各采集服務(wù)器的壓力，將采集任務(wù)進(jìn)行分發(fā)給壓力最小的采集服務(wù)器的任務(wù)分發(fā)器(1112)；

用于采集網(wǎng)頁(yè)數(shù)據(jù)的采集服務(wù)器(1113)。

13.如權(quán)利要求10～12中任一項(xiàng)所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，其特征在于：所述系統(tǒng)還包括用于為不同租戶建立不同賬號(hào)，根據(jù)不同租戶的租戶ID為租戶建立不同的用于存儲(chǔ)租戶輿情監(jiān)控業(yè)務(wù)規(guī)則和租戶所關(guān)心的輿情信息數(shù)據(jù)表的建立裝置(14)。

14.如權(quán)利要求10～12中任一項(xiàng)所述的多租戶網(wǎng)絡(luò)輿情監(jiān)控系統(tǒng)，其特征在于：所述系統(tǒng)還包括用于配置租戶信息、租戶的輿情監(jiān)控業(yè)務(wù)規(guī)則及特征詞庫(kù)的配置裝置(15)。