[發明專利]一種推薦效果的評估方法及裝置

有效

• 申請號: 201710615815.4
• 申請日: 2017-07-26
• 公開（公告）號: CN107391692B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 范欣;李海青;鄭堅
• 申請（專利權）人: 騰訊科技（北京）有限公司
• 主分類號: G06F16/9535
• 分類號: G06F16/9535
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 郭曼;王琦

本申請公開了一種推薦效果的評估方法及裝置。該方法包括：在基于一個推薦策略向多個用戶推薦內容時，獲取每個用戶針對推薦內容產生的行為數據，行為數據包括待評估時間段內多個行為指標上的數值；針對每個行為指標，根據每個用戶在該行為指標上的數值確定出該用戶在待評估用戶群中的排名；根據排名和每個行為指標的權重計算出待評估用戶群中每個用戶的第一健康度；及，根據第一健康度計算出與該推薦策略對應的推薦效果指數。本發明的這種方法及裝置，能夠提供單一的推薦效果指數用于評估不同的推薦策略，提高了服務器的資源利用率。

技術領域

本發明涉及互聯網技術領域，特別涉及一種推薦效果的評估方法及裝置。

背景技術

在互聯網應用中，推薦類應用可以向用戶推薦各種類型的內容。例如，新聞類應用每天向用戶推送娛樂、體育、財經等各個領域的新聞內容。

在評估推薦類應用的推薦效果時，通?；诙鄠€長期指標，例如，一段時間內的用戶留存率、日均/周均活躍用戶量、平均刷新次數等。在評估不同的推薦策略時，需要綜合考慮各個長期指標的表現。

但是，由于不同人在不同的場景下對某些指標的重要性有不同的認識，很難使用相同的指標直接進行橫向對比。因此，無法針對推薦效果得出具有可比性、一致性的結論。此外，對于不同的算法策略，各個長期指標還可能存在互相矛盾的情況。因此，目前的評估算法很難對不同的推薦策略進行有效的對比和評價。

發明內容

有鑒于此，本發明實施例提供了一種推薦效果的評估方法及裝置，能夠提供單一的推薦效果指數用于評估不同的推薦策略，提高了服務器的資源利用率。

具體地，本發明實施例的技術方案是這樣實現的：

本發明提供了一種推薦效果的評估方法，包括：在基于一個推薦策略向多個用戶推薦內容時，獲取每個用戶針對所述推薦內容產生的行為數據，所述行為數據包括待評估時間段內多個行為指標上的數值；

針對每個行為指標，根據每個用戶在該行為指標上的數值確定出該用戶在待評估用戶群中的排名；

根據所述排名和每個行為指標的權重計算出所述待評估用戶群中每個用戶的第一健康度；及，

根據所述第一健康度計算出與該推薦策略對應的推薦效果指數。

本發明還提供了一種推薦效果的評估裝置，包括：

獲取模塊，用于在基于一個推薦策略向多個用戶推薦內容時，獲取每個用戶針對所述推薦內容產生的行為數據，所述行為數據包括待評估時間段內多個行為指標上的數值；

排序模塊，用于針對每個行為指標，根據所述獲取模塊得到的每個用戶在該行為指標上的數值確定出該用戶在待評估用戶群中的排名；

第一計算模塊，用于根據所述排序模塊得到的排名和每個行為指標的權重計算出所述待評估用戶群中每個用戶的第一健康度；及，

第二計算模塊，用于根據所述第一計算模塊得到的第一健康度計算出與該推薦策略對應的推薦效果指數。

本發明還提供了一種計算機可讀存儲介質，其特征在于，存儲有計算機可讀指令，可以使至少一個處理器執行上述的方法。

由上述技術方案可見，本發明實施例提供的方法，綜合各個行為指標下用戶人群的健康度表現，計算出反映某個推薦策略的整體效果評估指標(即一個推薦效果指數)，從而能以一個單一的指標度量推薦系統的推薦效果，便于對不同的推薦策略實驗進行橫向可比，實現了對各類推薦產品進行有效評估的目的。

附圖說明

圖1為本發明一個實施例所涉及的實施環境示意圖；

圖2為本發明一個實施例中推薦效果的評估方法的流程示意圖；