[發明專利]用于圖像檢索的方法、計算設備和計算機存儲介質

有效

• 申請號: 202110122295.X
• 申請日: 2021-01-29
• 公開（公告）號: CN112507153B
• 公開（公告）日: 2021-05-07
• 發明（設計）人: 王克偉
• 申請（專利權）人: 上海眾旦信息科技有限公司
• 主分類號: G06F16/535
• 分類號: G06F16/535;G06F16/583;G06K9/62;G06N3/04;G06N3/08
• 代理公司: 北京市金杜律師事務所 11256
• 代理人: 王茂華

本公開涉及一種用于圖像檢索的方法、計算設備和計算機存儲介質。該方法包括：獲取與用戶畫像標簽相關聯的用戶群中用戶在第一預定時間間隔內針對目標對象的圖像的歷史操作信息；如果確定歷史操作信息符合預定條件，基于目標對象的圖像的圖像特征和相關聯的用戶畫像標簽，生成用于索引目標對象的圖像的表征特征；如果確定存在與當前用戶的用戶畫像標簽，基于用戶畫像標簽和待檢索圖像的圖像特征，生成關于待檢索圖像的表征特征；以及計算關于待檢索圖像的表征特征和預定圖像數據庫中的目標對象的圖像的表征特征之間的相似度，以確定圖像檢索結果。本公開能夠使得圖像檢索結果有效地反映用戶實際興趣偏好和檢索意圖。

技術領域

本公開總體上涉及機器學習，并且具體地，涉及用于圖像檢索的方法、計算設備和計算機存儲介質。

背景技術

傳統的圖像檢索方案主要包括三種：第一種例如是基于文本描述（例如圖像名稱）的圖像檢索方法，該方法例如是：根據用戶提供的查詢關鍵字找出標注有該查詢關鍵字對應的圖像，最后將查詢結果返回給用戶。第二種例如基于圖像內容的圖像檢索方法，該方法例如是：識別待查詢圖像中的目標查詢對象，從圖像數據庫中找出包含有該目標查詢對象的圖像，然后通過相似性度量排序后，將包含有目標查詢對象的圖像排在所輸出檢索結果的前面。第三種例如是基于圖像特征的圖像檢索方法，該方法例如是：提取待查詢圖像的圖像特征，基于圖像特征進行相似性計算，基于相似性計算結果確定檢索結果圖像。

無論是待查詢圖像的上述文本描述、圖像內容，還是圖像特征，其僅能反映有限的圖像信息，難以準確地反映用戶的實際興趣偏好和檢索意圖，因此，基于待查詢圖像的標簽、圖像所包括的對象或圖像特征的傳統的圖像檢索方案難以使得檢索結果準確地反映用戶實際興趣偏好和檢索意圖。

發明內容

本公開提供一種用于圖像檢索方法、計算設備和計算機存儲介質，能夠使得圖像檢索結果有效地反映用戶實際興趣偏好和檢索意圖。

根據本公開的第一方面，提供了一種用于圖像檢索的方法。該方法包括：獲取與用戶畫像標簽相關聯的用戶群中的多個用戶在第一預定時間間隔內針對預定圖像數據庫中的多個目標對象的圖像的歷史操作信息, 歷史操作信息至少包括多個用戶針對多個目標對象的圖像的歷史點擊操作信息和針對多個目標對象的歷史購買操作信息；響應于確定針對目標對象的圖像的歷史操作信息符合預定條件，基于目標對象的圖像的圖像特征和與目標對象的圖像相關聯的用戶畫像標簽，生成用于索引目標對象的圖像的表征特征；經由第一神經網絡模型，提取當前用戶的待檢索圖像的圖像特征；響應于確定存在與當前用戶相關聯的用戶畫像標簽，基于與當前用戶相關聯的用戶畫像標簽和待檢索圖像的圖像特征，生成關于待檢索圖像的表征特征；以及計算關于待檢索圖像的表征特征和預定圖像數據庫中的目標對象的圖像的表征特征之間的相似度，以用于基于相似度計算結果和預定相似度閾值，確定與待檢索圖像匹配的圖像檢索結果。

根據本發明的第二方面，還提供了一種計算設備，該設備包括：至少一個處理單元；至少一個存儲器，至少一個存儲器被耦合到至少一個處理單元并且存儲用于由至少一個處理單元執行的指令，指令當由至少一個處理單元執行時，使得計算設備執行本公開的第一方面的方法。

根據本公開的第三方面，還提供了一種計算機可讀存儲介質。該計算機可讀存儲介質上存儲有計算機程序，計算機程序被機器執行時執行本公開的第一方面的方法。

在一些實施例中，基于與當前用戶相關聯的用戶畫像標簽和待檢索圖像的圖像特征包括：經由第二神經網絡模型，提取與當前用戶相關聯的用戶畫像標簽的特征，以生成關于當前用戶的文字特征，第二神經網絡模型經由關于用戶畫像標簽的多樣本訓練；將待檢索圖像的圖像特征和關于當前用戶的文字特征輸入第三神經網絡模型，第三神經網絡模型包括輸入層、隱藏層和輸出層；以及獲取隱藏層的特征向量，以生成關于待檢索圖像的表征特征。

在一些實施例中，第三神經網絡模型是基于自動編碼器模型所構建的，關于待檢索圖像的表征特征的維度小于待檢索圖像的圖像特征與文字特征的維度之和。