[發明專利]網頁搜索方法及系統

有效

• 申請號: 201510945454.0
• 申請日: 2015-12-15
• 公開（公告）號: CN105447187B
• 公開（公告）日: 2017-09-22
• 發明（設計）人: 代俊
• 申請（專利權）人: 廣州神馬移動信息科技有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京超凡志成知識產權代理事務所(普通合伙)11371
• 代理人: 吳開磊

1.一種網頁搜索方法，其特征在于，包括：

監測網頁搜索系統的實時流量；

當所述實時流量在預設過載流量閾值和預設容災流量閾值之間，且，所述網頁搜索系統的緩存系統中不存在與目標查詢詞相同的預設查詢詞時，根據所述網頁搜索系統可承受的正常流量與所述實時流量的比值及與所述網頁搜索系統的檢索節點陣列的列數的乘積，確定執行本次搜索任務的檢索節點個數Q；其中，所述預設過載流量閾值小于所述預設容災流量閾值；

在所述網頁搜索系統的檢索節點陣列中選出Q個檢索節點，并觸發選出的Q個檢索節點執行對所述目標查詢詞的實時搜索任務，得到實時搜索結果。

2.根據權利要求1所述的方法，其特征在于，還包括：

將所述實時搜索結果存儲于相應檢索節點的緩存單元。

3.根據權利要求2所述的方法，其特征在于，還包括：

將所述目標查詢詞及對應的檢索節點個數Q存儲于所述緩存系統中。

4.根據權利要求1至3任一項所述的方法，其特征在于，根據所述網頁搜索系統可承受的正常流量與所述實時流量的比值及與所述網頁搜索系統的檢索節點陣列的列數的乘積，確定執行本次搜索任務的檢索節點個數Q，包括：

根據公式計算本次搜索任務的檢索節點個數Q；

其中，W_new表示所述實時流量，W表示所述網頁搜索系統可承受的正常流量，N表示所述檢索節點陣列的列數。

5.根據權利要求1至3任一項所述的方法，其特征在于，所述選擇所述網頁搜索系統的檢索節點陣列中的Q個檢索節點，包括：

通過滾動式選擇法選擇本次搜索任務所需的Q個檢索節點。

6.根據權利要求1所述的方法，其特征在于，還包括：

在所述實時流量大于所述預設容災流量閾值時，根據所述實時流量與正常流量的比值確定執行本次搜索任務的檢索節點個數Q，并在所述緩存系統中查找與目標查詢詞部分匹配的預設查詢詞；

選擇所述網頁搜索系統的檢索節點陣列中的Q個檢索節點，并觸發選中的Q個檢索節點執行對所述目標查詢詞的實時搜索任務，得到實時搜索結果；

將所述實時搜索結果和所述預設查詢詞對應的預設搜索結果合并，得到所述目標查詢詞對應的目標搜索結果。

7.根據權利要求6所述的方法，其特征在于，還包括：

根據所述緩存系統中存儲的每個預設查詢詞的哈希值及其分詞結果，在所述緩存系統中構建各個分詞的倒排索引，得到各個分詞對應的哈希值倒排鏈；

所述在所述緩存系統中查找與目標查詢詞部分匹配的預設查詢詞，包括：

確定目標查詢詞對應的各個目標分詞及每個目標分詞對應的權重值；

按權重值由高到低的順序選擇所述目標分詞，直至選中的目標分詞的權重值之和不小于預設權重閾值；

判斷是否存在至少一個交集哈希值同時位于所述選中的多個目標分詞對應的哈希值倒排鏈中；

如果存在所述交集哈希值，則將所述交集哈希值對應的預設查詢詞標記為與目標查詢詞部分匹配的預設查詢詞。

8.根據權利要求7所述的方法，其特征在于，還包括：

將所述目標查詢詞及對應的檢索節點個數Q、交集哈希值存儲于所述緩存系統中。

9.一種網頁搜索系統，其特征在于，包括：流量監測單元和過載處理單元；

其中，所述流量監測單元用于，監測網頁搜索系統的實時流量；

所述過載處理單元用于，處理所述實時流量在預設過載流量閾值和預設容災流量閾值之間時對目標查詢詞的搜索任務；其中，所述預設過載流量閾值小于所述預設容災流量閾值；

所述過載處理單元包括：過載節點計算單元和過載節點選擇單元；

其中，所述過載節點計算單元用于，當所述實時流量在預設過載流量閾值和預設容災流量閾值之間，且所述網頁搜索系統的緩存系統中不存在與目標查詢詞相同的預設查詢詞時，根據所述網頁搜索系統可承受的正常流量與所述實時流量的比值及與所述網頁搜索系統的檢索節點陣列的列數的乘積，確定執行本次搜索任務的檢索節點個數Q；

所述過載節點選擇單元用于，選擇所述網頁搜索系統的檢索節點陣列中的Q個檢索節點，并觸發選中的Q個檢索節點執行對所述目標查詢詞的實時搜索任務，得到實時搜索結果。