[發明專利]一種基于圖像的商品推薦方法及系統

有效

• 申請號: 201610197443.3
• 申請日: 2016-03-31
• 公開（公告）號: CN107292642B
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 常江龍;馮玉璽;楊現;張波;陳雪峰;張偵
• 申請（專利權）人: 蘇寧云計算有限公司
• 主分類號: G06Q30/02
• 分類號: G06Q30/02;G06F16/583
• 代理公司: 江蘇圣典律師事務所 32237
• 代理人: 許峰

本發明實施例公開了一種基于圖像的商品推薦方法及系統，屬于互聯網領域，能夠適用于普通多目標場景，且可以獲得較好的推薦效果。該方法包括以下步驟：獲取圖像，并對圖像進行預處理；識別預處理后的圖像中的目標區域；對識別出的目標區域進行聚合，生成多模態的內容描述；根據生成的內容描述，得到初步商品推薦結果；對得到的初步商品推薦結果進行合并，刪除重復項，輸出合并后的商品推薦結果。

技術領域

本發明涉及互聯網領域，尤其涉及電子商務中的基于圖像的商品推薦方法及系統。

背景技術

電商平臺的推薦系統，能夠根據用戶過往數據等相關信息，自動為用戶展示可能有興趣的商品，大大提高了用戶購買效率，增強了用戶體驗，已成為電商平臺的重要組成部分。基于圖像媒體數據的商品推薦方法，作為一種新興的推薦方式，能夠根據用戶感興趣的媒體視覺內容，挖掘和提供相應的推薦對象，無須用戶文本輸入。隨著媒體內容分析技術的進步，其精度也日益提高。

目前，基于圖像的商品推薦方法，一般假設商品是圖像中的主體內容，通過主體檢測、特征提取、特征匹配或識別等，返回相應的商品信息或者相匹配的圖像。然而這也決定了這些方法僅適用于單一主體的商品圖像，對圖像和用戶的要求較嚴格，也不適用于隨手拍攝或掃描的實際場合。同時其推薦結果完全依賴于單個商品實體的識別或匹配，而現有技術對于大范圍商品圖像的識別，仍然不具備很高的準確率。

發明內容

技術問題：本發明實施例所要解決的問題是：提供一種基于圖像的商品推薦方法及系統，能夠適用于普通多目標場景，且可以獲得較好的推薦效果。

技術方案：為解決以上技術問題，本發明實施例提供的技術方案如下：

第一方面，本實施例提供一種基于圖像的商品推薦方法，該方法包括以下步驟：

獲取圖像，并對圖像進行預處理；

識別預處理后的圖像中的目標區域；

對識別出的目標區域進行聚合，生成多模態的內容描述；

根據生成的內容描述，得到初步商品推薦結果；

對得到的初步商品推薦結果進行合并，刪除重復項，輸出合并后的商品推薦結果。

結合第一方面，作為第一種可能實現的方式，所述的獲取圖像，并對圖像進行預處理是指：通過移動終端獲取圖像，并對圖像進行包括縮放和/或剪裁步驟的預處理。

結合第一方面，作為第二種可能實現的方式，所述的識別預處理后的圖像中的目標區域具體包括：

檢測圖像中可能目標區域，并形成可能目標區域集合；

對可能目標區域集合進行篩選，篩選出目標區域；

利用圖像分類器，對目標區域內的圖像進行識別。

結合第一方面的第二種可能實現的方式，作為第三種可能實現的方式，所述的利用圖像分類器，對目標區域內的圖像進行識別具體包括：

對每個目標區域內圖像，從中取出若干個亞區域圖像，并將亞區域圖像進行歸一化，將其調整為與圖像分類器訓練時采用的相同尺寸，作為圖像分類器的輸入；從圖像分類器輸出的該圖像屬于各個類別的概率中選取概率最大的類別作為該圖像所屬類別。

結合第一方面，作為第四種可能實現的方式，所述的對識別出的目標區域進行聚合，生成多模態的內容描述具體包括：

將識別的每個目標區域與文字描述相對應，得到文字描述向量，作為該目標區域內容的文本標識，生成單目標文本描述；

根據各個單目標文本描述之間的關聯關系，將屬于同一商品的單目標文本描述進行聚類，生成代表不同商品的聚類；