[發明專利]一種針對購物圖像搜索的目標衣物圖像提取方法

有效

• 申請號: 201210207142.6
• 申請日: 2012-06-21
• 公開（公告）號: CN102779270A
• 公開（公告）日: 2012-11-14
• 發明（設計）人: 吳曉;趙波;梁玲玲;彭強
• 申請（專利權）人: 西南交通大學
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 成都信博專利代理有限責任公司 51200
• 代理人: 張澎

所屬技術領域

本發明涉及圖像處理以及搜索引擎技術領域，具體是一種針對購物圖像中主體目標/商品(包括：衣物、包、鞋等商品)的提取方法。?

背景技術

基于內容的購物圖像搜索是近年來學術界和工業界的研究熱點，然而圖像背景雜亂、多目標共存、物體遮擋等問題使得大規模圖像搜索成為一個具有挑戰性的研究課題。?

電子商務和在線購物網站通常存在大量包含人物(如：模特)的購物圖片。為了吸引顧客，商家往往會邀請模特穿上待售的衣物進行拍攝，使得購物圖片不僅包含了衣物本身，還包含背景和人物等其它噪音。由于購物圖像在自然場景下受到背景、光線、角度、遮擋、人物、環境噪音等因素的影響，使得圖像的整個場景較為復雜。這給基于內容的購物圖像搜索造成了極大的困難。同時，用戶更關注模特身上的主體衣物而不關心圖像中其它的內容。因此如何有效地從購物圖片中提取用戶真正感興趣的商品，即模特身上的衣物，保留最核心的商品目標，去除噪音，對進一步分析圖像內容及提高購物商品圖像搜索的準確度具有極其重要的作用。?

發明內容

鑒于現有技術的以上缺點，本發明的目的是，提供一種提取購物商品圖像中人物身上商品(如衣物)的方法。使之利用人臉和膚色檢測作為輔助信息，通過統計概率模型估計前景衣服和背景的概率，結合空間概率一致性，自動提?取人物身上的衣物商品，適用于含單個人物和多個人物的購物圖像商品提取。?

本發明的目的是通過如下的手段實現的。?

一種針對購物圖像搜索的目標衣物圖像提取方法，用于在含單個人物和多個人物的購物商品圖像中進行主體目標衣物圖像提取，其特征在于，對所述復雜購物圖像，借助人臉和膚色檢測，輔助確定前景和背景模型，使得算法更準確地提取衣服部分，降低圖像中噪聲的干擾，包含如下的步驟：?

1)圖像預處理：對復雜圖像進行降低圖像中噪聲干擾的預處理；?

2)人臉和膚色檢測：?

對1)預處理過后的圖像進行人臉檢測和膚色檢測，采用橢圓模型和高斯模型結合的方法檢測出膚色區域，即：對圖像分別用單高斯膚色模型和橢圓模型膚色檢測以后再將兩個檢測結果的交集作為膚色檢測的最終結果，使用Adaboost人臉檢測算法在膚色區域定位人臉，確定人臉區域；?

3)衣物初定位：?

對2)所獲得到的人臉區域之外的區域進行辨析，分出身體軀干區域和身體活動區域；衣物初定位的結果是身體軀干部分的衣物；?

4)建立衣物模型和背景模型：?

根據步驟3)得到的三個區域，建立衣物模型和背景模型；?

a)建立衣物模型：將軀干活動區域去除步驟2得到的膚色區域作為衣物樣本集，建立衣物的高斯混合模型，求出每個像素點是衣物的概率；?

b)建立背景模型：將模特的身體活動區域以外的部分加上身體軀干區域中的膚色區域作為背景樣本集，建立背景的高斯混合模型，求出每個像素點是背景的概率；?

c)計算圖像空間信息：采用合適的分割算法對原圖像進行分割，分割后的任一?區域中的像素點是衣物或背景的概率是接近的即空間概率分布一致，計算每個區域所有像素點的平均衣物概率和背景概率作為該區域空間信息概率；?

d)加入空間信息修正衣物和背景模型：結合步驟a、b得出的前背景概率和步驟c得出的空間信息概率，修正每個像素點是前景或者背景的概率；?

5)衣物初定位：?

a)根據第4步的結果，將所有衣物概率大于背景概率的像素點構成衣物區域，所有背景概率大于衣物概率的像素點構成背景區域；?

b)對得到的衣物區域去除第2步得到的膚色區域，得到最終的衣物區域；?

6)輸出所得目標衣物圖像信息。?

本發明方法考慮了人物的人臉位置，將膚色和人臉檢測作為輔助信息協助定位衣物區域，根據人臉準確地對衣物進行初定位；采用統計概率模型分析衣物和圖像背景，同時考慮了圖像的空間信息使得模型更準確，不需要人為干預，適合大規模購物圖像自動提取商品目標。不僅適用于含單人物(模特)的購物圖像，同樣適用于含有多人物(模特)的購物圖像，可以準確提取出每個人物(模特)身上的衣物商品。尤其適合在電子商務和在線購物網站使用，消除復雜圖像背景的影響，辨識和分析主體目標圖像，為購物圖像搜索引擎服務。?

附圖說明：

圖1是本發明購物圖像衣物商品提取算法的流程圖。?