[發明專利]一種商品圖像主體區域檢測方法

無效

• 申請號: 201210249142.2
• 申請日: 2012-07-17
• 公開（公告）號: CN102842135A
• 公開（公告）日: 2012-12-26
• 發明（設計）人: 王海洋;黃琦;林建聰;薛琴;曾凡濤;孫凱
• 申請（專利權）人: 杭州淘淘搜科技有限公司
• 主分類號: G06T7/00
• 分類號: G06T7/00;G06F17/30
• 代理公司: 杭州求是專利事務所有限公司 33200
• 代理人: 周烽

技術領域

本發明涉及圖像搜索技術領域和人類視覺心理學領域，尤其涉及一種基于人類視覺特性的商品圖像主體區域檢測方法。

背景技術

在圖像搜索技術中，當用戶上傳一幅商品圖像并期望搜尋與該圖相同或相近的商品時，用戶更關注商品本身，如T恤、風衣、靴子、衛衣、半身裙、褲子、包包、連衣裙等，且該商品區域最能表現用戶的視覺注意程度，從人類視覺感知模型的角度看，用戶感興趣的區域一定是圖像或視頻中的顯著性區域。為了改善用戶的視覺搜索體驗，使用戶購物體驗更友好，對用戶重點關注的“感興趣區域”進行重點分析，通過自動定位、準確捕捉輸入商品圖中的顯著性的主體區域，有效地提高“以圖搜圖”的檢索精度和效率。

發明內容

本發明的目的在于針對現有技術的不足，提供一種商品圖像跨類目檢索方法。

本發明的目的是通過以下技術方案來實現的：一種商品圖像主體區域檢測方法，其特征在于，該方法包括如下步驟：

（1）對商品圖像進行圖像尺寸縮放、過濾膚色像素以及去除顏色聚類生成的具有較小聚類數目的像素等預處理，以排除與商品主體顏色較不相關像素的干擾；

（2）對步驟（1）得到的商品圖像進行顏色分割，得到初始聚類數目和初始聚類中心；利用顏色聚類計算新聚類中心、每類顏色權重以及每類顏色協方差；

（3）將步驟（2）得到的聚類中心、顏色權重、顏色協方差以及步驟（1）得到的商品圖像結合，計算主體區域；包括以下子步驟：

3.1）對步驟（2）得到的聚類中心、顏色協方差以及步驟（1）得到的商品圖像的像素樣本值計算指定每類顏色類別下觀察像素樣本的類條件概率密度；利用指定每類顏色類別下觀察像素樣本的類條件概率密度和步驟（2）得到的顏色權重計算每類顏色的后驗概率，得到顏色概率映射圖；

3.2）對步驟3.1）得到的顏色概率映射圖和步驟（1）得到的商品圖像像素樣本的空間位置，分別計算每類顏色空間位置的水平方差和垂直方差；

3.3）對步驟（1）得到的商品圖像分別計算五個區域的顏色直方圖并比較峰值個數，當峰值個數滿足某條件時，該圖就是復雜背景圖；

3.4）只對背景簡單的商品圖，利用步驟3.1）得到的顏色概率映射圖和步驟（1）得到的商品圖像像素樣本的空間位置與圖像中心位置的距離，計算每類顏色空間位置的中心權重；得到每類顏色的空間分布權重；

3.5）將步驟3.1）得到的顏色概率映射圖和步驟3.4）得到的每類顏色的空間分布權重結合，計算圖像每個像素樣本的概率加權和，得到商品圖像中的主體區域并進行顯示。

本發明的有益效果是，本發明針對服飾類商品，基于人類視覺注意的模型提出了一種商品圖像主體區域檢測方法，而不依賴人工交互也不再只突出主體的邊緣。通過有效地結合Gaussian?Mixture?Model（GMM）方法、商品圖像內容的復雜度以及商品圖像中主體顏色的空間信息，自適應地計算圖像中每一個像素點的顯著性，達到自動檢測服飾類商品圖像的商品顯著區域的目的。方法對非主體區域的背景部分有更好的抑制，對主體區域有更好的突顯，對主體本身有更好的強調，并滿足圖像檢索的實時性要求，從而解決了商品圖像主體區域檢測的問題，能夠準確地定位用戶感興趣的部分，幫助用戶快速準確地搜索到目標商品。

附圖說明

圖1是商品圖像主體區域檢測流程圖；

圖2是商品圖像預處理流程圖；

圖3是膚色過濾流程圖；

圖4是Hill-climbing方法流程圖；

圖5是顏色聚類流程圖；

圖6是顏色概率映射圖生成流程圖；

圖7是顏色空間分布權重計算流程圖；

圖8是商品主體區域顯示方式示意圖。

具體實施方式

下面以服飾類圖像的主體區域檢測和顯示為例，結合附圖詳細描述本發明，本發明的目的和效果將變得更加明顯。

如圖1所示，本發明一種商品圖像主體區域檢測方法包括如下步驟：

步驟1：對商品圖像進行圖像尺寸縮放、過濾膚色像素以及去除顏色聚類生成的具有較小聚類數目的像素等預處理，以排除與商品主體顏色較不相關像素的干擾，如圖2。

在保持原始商品圖像的高寬比不變的前提下，將輸入圖像縮放到圖像最大尺寸（圖像高度或圖像寬度）為128，該尺寸下得到的主體區域與輸入原圖尺寸得到的主體區域視覺差異不明顯。

在處理包含人體膚色的服飾類商品圖時，用戶并非重點關注人體膚色，且該類圖中的膚色將會干擾顏色的聚類效果，需要去除膚色對商品主體顏色的影響。