[發明專利]目標主題智能抓取方法、系統及計算機可讀存儲介質

在審

• 申請號: 201710385603.1
• 申請日: 2017-05-26
• 公開（公告）號: CN107133217A
• 公開（公告）日: 2017-09-05
• 發明（設計）人: 張程偉;劉順峰
• 申請（專利權）人: 北京惠商之星網絡科技有限公司
• 主分類號: G06F17/27
• 分類號: G06F17/27;G06F17/30
• 代理公司: 北京思創大成知識產權代理有限公司11614
• 代理人: 張清芳

1.一種目標主題智能抓取方法，包括：

調度中心從數據庫中讀取待匹配搜索的目標主題，通過調度算法分配給多個隊列；

多個分析器同時從對應的所述多個隊列中獲取等待分析的所述目標主題，并進行關鍵詞提取，獲得所述關鍵詞；

多個分析器同時將所述關鍵詞應用到對應的多個互聯網站點的搜索界面進行搜索，將獲得的搜索結果返回給調度中心；以及

調度中心分析所述搜索結果，保存最終的搜索結果，

其中，所述多個分析器與所述多個隊列一一對應。

2.根據權利要求1所述的目標主題智能抓取方法，其中，調度中心分析所述搜索結果，保存最終的搜索結果包括：

判斷所述搜索結果是否有效，如果無效，繼續進行所述隊列的分配，重復關鍵詞提取與搜索；以及

如果有效，保存所述最終的搜索結果。

3.根據權利要求1所述的目標主題智能抓取方法，其中，所述多個分析器與所述多個互聯網站點一一對應。

4.根據權利要求1所述的目標主題智能抓取方法，其中，所述待匹配搜索的目標主題由用戶通過客戶端上傳至所述數據庫。

5.根據權利要求4所述的目標主題智能抓取方法，其中，還包括：調度中心將所述最終的搜索結果返回給所述客戶端。

6.一種目標主題智能抓取系統，包括：

調度中心，所述調度中心從數據庫中讀取待匹配搜索的目標主題，通過調度算法分配給多個隊列，分析搜索結果，并保存最終的搜索結果；

數據庫，存儲所述待匹配搜索的目標主題；

隊列，所述多個隊列接收所述調度中心分配的所述待匹配搜索的目標主題，并分配給對應的多個分析器；以及

分析器，所述多個分析器同時從對應的所述多個隊列中獲取等待分析的所述目標主題，并進行關鍵詞提取，將所述關鍵詞同時應用到對應的多個互聯網站點的搜索界面進行搜索，將所述搜索結果返回給調度中心，

其中，所述多個分析器與所述多個隊列一一對應。

7.根據權利要求6所述的目標主題智能抓取系統，其中，調度中心分析搜索結果，并保存最終的搜索結果包括：

判斷所述搜索結果是否有效，如果無效，繼續進行所述隊列的分配，重復關鍵詞提取與搜索；以及

如果有效，保存所述最終的搜索結果。

8.根據權利要求6所述的目標主題智能抓取系統，其中，所述多個分析器與所述多個互聯網站點一一對應。

9.根據權利要求6所述的目標主題智能抓取系統，其中，所述待匹配搜索的目標主題由用戶通過客戶端上傳至所述數據庫，調度中心將所述最終的搜索結果返回給所述客戶端。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，其中，所述程序被處理器執行時實現以下步驟：

調度中心從數據庫中讀取待匹配搜索的目標主題，通過調度算法分配給多個隊列；

多個分析器同時從對應的所述多個隊列中獲取等待分析的所述目標主題，并進行關鍵詞提取，獲得所述關鍵詞；

多個分析器同時將所述關鍵詞應用到對應的多個互聯網站點的搜索界面進行搜索，將獲得的搜索結果返回給調度中心；以及

調度中心分析所述搜索結果，保存最終的搜索結果，

其中，所述多個分析器與所述多個隊列一一對應。