[發(fā)明專利]人物服裝特征提取裝置及方法

在審

• 申請(qǐng)?zhí)枺?/td>: 201510345029.8
• 申請(qǐng)日: 2010-10-13
• 公開（公告）號(hào): CN104933669A
• 公開（公告）日: 2015-09-23
• 發(fā)明（設(shè)計(jì)）人: 大網(wǎng)亮磨;平川康史;高橋祐介
• 申請(qǐng)（專利權(quán)）人: 日本電氣株式會(huì)社
• 主分類號(hào): G06T1/00
• 分類號(hào): G06T1/00
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 齊秀鳳

本申請(qǐng)是申請(qǐng)?zhí)枮?01080045981.1、申請(qǐng)日為2010年10月13日、發(fā)明名稱為“人物服裝特征提取裝置、人物檢索裝置及其處理方法”的發(fā)明專利申請(qǐng)的分案申請(qǐng)。

技術(shù)領(lǐng)域

本發(fā)明涉及從輸入影像中提取人物服裝特征的人物服裝特征提取裝置。另外，本發(fā)明涉及基于從輸入影像中提取出的人物服裝特征來檢索人物的人物檢索裝置。進(jìn)而，本發(fā)明涉及人物服裝特征提取處理方法以及人物檢索處理方法。

本申請(qǐng)基于2009年10月16日在日本提出的特愿2009-239360號(hào)專利申請(qǐng)而主動(dòng)優(yōu)先權(quán)，并將其內(nèi)容引用于此。

背景技術(shù)

現(xiàn)有技術(shù)中，開發(fā)了各種人物檢索方法以及監(jiān)視系統(tǒng)、和圖像保存檢索系統(tǒng)。專利文獻(xiàn)1公開了在監(jiān)視系統(tǒng)中從所保存的影像中檢索人物的人物檢索方法。在該監(jiān)視系統(tǒng)中，在錄制影像時(shí)，提取人物的臉以及服裝的信息并保存在數(shù)據(jù)庫(kù)中。在人物檢索時(shí)，將保存在數(shù)據(jù)庫(kù)中的臉/服裝特征與作為查詢所被賦予的圖像的臉/服裝特征進(jìn)行比較，來判定是否為同一人物。

參照?qǐng)D10來詳述專利文獻(xiàn)1中所公開的人物檢索系統(tǒng)。圖10表示人物檢索裝置的構(gòu)成，由臉區(qū)域檢測(cè)/臉特征提取部1000、1020、穿衣區(qū)域檢測(cè)/穿衣特征提取部1010、1030、穿衣特征數(shù)據(jù)庫(kù)1040、臉特征數(shù)據(jù)庫(kù)1050、臉相似度計(jì)算部1060、穿衣相似度算出部1070、以及人物相同性判定部1080構(gòu)成。

臉區(qū)域檢測(cè)/臉特征提取部1000從由監(jiān)視系統(tǒng)取得的影像中進(jìn)行臉區(qū)域檢測(cè)以及臉特征提取，并將提取出的臉特征輸出到臉特征數(shù)據(jù)庫(kù)1050中。穿衣區(qū)域檢測(cè)/穿衣特征提取部1010從由監(jiān)視系統(tǒng)取得的影像中進(jìn)行穿衣區(qū)域檢測(cè)以及穿衣特征提取，并將提取出的穿衣特征輸出到穿衣特征數(shù)據(jù)庫(kù)1040中。另一方面，臉區(qū)域檢測(cè)/臉特征提取部1020從所輸入的查詢圖像中進(jìn)行臉區(qū)域檢測(cè)以及臉特征提取，并將查詢臉特征輸出給穿衣相似度計(jì)算部1070。臉相似度計(jì)算部1060比較保存于臉特征數(shù)據(jù)庫(kù)1050中的臉特征和從臉區(qū)域檢測(cè)/臉特征提取部1020輸入的查詢臉特征，并計(jì)算出臉相似度，將計(jì)算結(jié)果輸出給人物相同性判定部1080。穿衣相似度計(jì)算部1070比較保存在穿衣特征數(shù)據(jù)庫(kù)1040中的穿衣特征和從穿衣區(qū)域檢測(cè)/穿衣特征提取部1030輸入的查詢穿衣特征，并計(jì)算出穿衣相似度，將計(jì)算結(jié)果輸出給人物相同性判定部1080。人物相同性判定部1080基于臉相似度計(jì)算部1060所計(jì)算出的臉相似度和穿衣相似度計(jì)算部1070所計(jì)算出的穿衣相似度來判定人物的相同性，并輸出人物檢索結(jié)果。

接下來，說明圖10所示的人物檢索裝置的動(dòng)作。首先，將從監(jiān)視系統(tǒng)取得的影像輸入到臉區(qū)域檢測(cè)/臉特征提取部1000以及穿衣區(qū)域檢測(cè)/穿衣特征提取部1010。臉區(qū)域檢測(cè)/臉特征提取部1000對(duì)輸入影像的各幀進(jìn)行臉區(qū)域檢測(cè)，對(duì)所檢測(cè)出的臉區(qū)域進(jìn)行臉特征提取。從由輸入影像檢測(cè)出的臉區(qū)域中提取的臉特征被保存到臉特征數(shù)據(jù)庫(kù)1050中。

穿衣區(qū)域檢測(cè)/穿衣特征提取部1010從輸入影像中檢測(cè)穿衣區(qū)域，提取其視覺特征即穿衣特征。所提取出的穿衣特征被保存在穿衣特征數(shù)據(jù)庫(kù)1040中。

人物檢索時(shí)，將查詢圖像輸入到臉區(qū)域檢測(cè)/臉特征提取部1020以及穿衣區(qū)域檢測(cè)/穿衣特征提取部1030。臉區(qū)域檢測(cè)/臉特征提取部1020以及穿衣區(qū)域檢測(cè)/穿衣特征提取部1030與所述臉區(qū)域檢測(cè)/臉特征提取部1000以及穿衣區(qū)域檢測(cè)/穿衣特征提取部1010發(fā)揮相同的作用，提取查詢臉特征以及查詢穿衣特征。

臉相似度計(jì)算部1060將查詢臉特征與保存在臉特征數(shù)據(jù)庫(kù)105中的臉特征進(jìn)行比較，計(jì)算出臉相似度。另一方面，穿衣相似度計(jì)算部1070將查詢穿衣特征與保存在穿衣特征數(shù)據(jù)庫(kù)1040中的穿衣特征進(jìn)行比較，計(jì)算出穿衣相似度。人物相同性判定部1080綜合臉相似度和穿衣相似度來判定人物相同性，并據(jù)此輸出人物檢索結(jié)果。

專利文獻(xiàn)2公開了一種圖像保存/檢索系統(tǒng)，檢索具有與表現(xiàn)人類主觀感知的色調(diào)的色覺語言相符的圖像特征的圖像數(shù)據(jù)。在此，預(yù)先設(shè)定人類的自然語言所包含的色調(diào)表現(xiàn)與顏色空間的像素的對(duì)應(yīng)關(guān)系。另外，從保存在數(shù)據(jù)庫(kù)中的圖像數(shù)據(jù)中提取像素，計(jì)算出與色調(diào)表現(xiàn)之間的相似度并保存。若賦予色調(diào)表現(xiàn)作為查詢，則調(diào)查該色調(diào)表現(xiàn)與圖像數(shù)據(jù)之間的相似度，檢索相似度高的圖像數(shù)據(jù)并顯示。

在先技術(shù)文獻(xiàn)

專利文獻(xiàn)

專利文獻(xiàn)1：JP特開2009-199322號(hào)公報(bào)

專利文獻(xiàn)2：JP特開2009-3581號(hào)公報(bào)

發(fā)明的概要

發(fā)明要解決的課題