[發明專利]搜索結果的質量評估方法、裝置、服務器和介質

有效

• 申請號: 201810688272.3
• 申請日: 2018-06-28
• 公開（公告）號: CN108897685B
• 公開（公告）日: 2022-02-25
• 發明（設計）人: 李虓;王軼凡;吳迪;陳冠霖;賈晉康;金慈航
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

1.一種搜索結果的質量評估方法，其特征在于，包括：

獲取目標查詢對應的至少兩個搜索結果列表，其中，不同的搜索結果列表是由不同的搜索排序算法得到；

將所述至少兩個搜索結果列表中的搜索結果按照列表順序進行拆分，得到至少一個搜索結果組，其中，所述搜索結果組中包括每個搜索結果列表中相同排序位置的搜索結果；

獲取用戶對所述至少一個搜索結果組的評分結果，并進行擬合，得到目標查詢的搜索結果的評估結果；

如果每個搜索結果組中包括兩個搜索結果，當任意兩個搜索結果組互為對調搜索結果組時，其中，所述互為對調搜索結果組是指搜索結果相同且搜索結果的位置對調的搜索結果組，則相應的，獲取用戶對所述至少一個搜索結果組的評分結果，包括：

獲取用戶對所述互為對調搜索結果組中任一個搜索結果組的評分結果，并通過取相反數運算得到所述互為對調搜索結果組中另一個搜索結果組的評分結果。

2.根據權利要求1所述的方法，其特征在于，每個搜索結果組中包括至少兩個不同的搜索結果。

3.根據權利要求1～2中任一所述的方法，其特征在于，獲取用戶對所述至少一個搜索結果組的評分結果，并進行擬合，得到目標查詢的搜索結果的評估結果，包括：

獲取用戶對所述至少一個搜索結果組的評分結果；

根據預先確定的搜索結果列表中不同排序位置對應的權重，將所述至少一個搜索結果組的評分結果進行加權求和，得到目標查詢的搜索結果的評估結果。

4.根據權利要求3所述的方法，其特征在于，在根據預先確定的搜索結果列表中不同排序位置對應的權重，將所述至少一個搜索結果組的評分結果進行加權求和之前，所述方法還包括：

獲取樣本查詢對應的至少兩個樣本搜索結果列表；

利用并排評估方法對所述至少兩個樣本搜索結果列表中的搜索結果進行評估；

將所述至少兩個樣本搜索結果列表按照列表順序進行拆分，得到至少一個樣本搜索結果組；

獲取用戶對所述至少一個樣本搜索結果組的評分結果；

將所述并排評估方法的評估結果和用戶對所述至少一個樣本搜索結果組的評分結果作為輸入，通過回歸訓練得到所述權重。

5.一種搜索結果的質量評估裝置，其特征在于，包括：

搜索結果列表獲取模塊，用于獲取目標查詢對應的至少兩個搜索結果列表，其中，不同的搜索結果列表是由不同的搜索排序算法得到；

搜索結果列表拆分模塊，用于將所述至少兩個搜索結果列表中的搜索結果按照列表順序進行拆分，得到至少一個搜索結果組，其中，所述搜索結果組中包括每個搜索結果列表中相同排序位置的搜索結果；

評估結果確定模塊，用于獲取用戶對所述至少一個搜索結果組的評分結果，并進行擬合，得到目標查詢的搜索結果的評估結果；

如果所述搜索結果列表拆分模塊中每個搜索結果組中包括兩個搜索結果，當任意兩個搜索結果組互為對調搜索結果組時，其中，所述互為對調搜索結果組是指搜索結果相同且搜索結果的位置對調的搜索結果組，則相應的，所述評估結果確定模塊具體用于：

獲取用戶對所述互為對調搜索結果組中任一個搜索結果組的評分結果，并通過取相反數運算得到所述互為對調搜索結果組中另一個搜索結果組的評分結果，結合獲取的除所述互為對調搜索結果組之外的搜索結果組的評分結果，進行擬合，得到目標查詢的搜索結果的評估結果。

6.根據權利要求5所述的裝置，其特征在于，所述搜索結果列表拆分模塊中每個搜索結果組中包括至少兩個不同的搜索結果。

7.根據權利要求5～6中任一所述的裝置，其特征在于，所述評估結果確定模塊包括：

搜索結果組評分獲取單元，用于獲取用戶對所述至少一個搜索結果組的評分結果；

加權求和單元，用于根據預先確定的搜索結果列表中不同排序位置對應的權重，將所述至少一個搜索結果組的評分結果進行加權求和，得到目標查詢的搜索結果的評估結果。