[發(fā)明專利]基于多模態(tài)的服裝圖像檢索方法

在審

• 申請?zhí)枺?/td>: 201410214929.4
• 申請日: 2014-05-20
• 公開（公告）號: CN103955543A
• 公開（公告）日: 2014-07-30
• 發(fā)明（設(shè)計）人: 葉茂;趙苗苗;劉啟和;蔡小路;占偉鵬
• 申請（專利權(quán)）人: 電子科技大學(xué)
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 成都宏順專利代理事務(wù)所(普通合伙) 51227
• 代理人: 周永宏

1.基于多模態(tài)的服裝圖像檢索方法，其特征在于，其實現(xiàn)的具體步驟為：

S1：構(gòu)建服裝圖像文本庫；

S2：構(gòu)建服裝圖像特征庫；

S3：用戶輸入待檢索服裝圖像和文本描述；

S4：通過文本檢索得到候選集Q1；

S5：通過圖像多特征檢索得到候選集Q2；

S6：根據(jù)用戶反饋對候選集Q2進(jìn)行重排得到結(jié)果集R。

2.根據(jù)權(quán)利要求1所述的基于多模態(tài)的服裝圖像檢索方法，其特征在于，步驟S1的具體分步驟為：

S11：通過網(wǎng)頁分析，提取出對應(yīng)服裝圖像的網(wǎng)頁文本信息；

S12：將文本信息存儲到數(shù)據(jù)庫中；

S13：對文本信息進(jìn)行分詞；

S14：創(chuàng)建文本索引文件。

3.根據(jù)權(quán)利要求2所述的基于多模態(tài)的服裝圖像檢索方法，其特征在于，步驟S2的具體分步驟為：

S21：對服裝圖像進(jìn)行預(yù)處理操作，包括灰度處理和尺度歸一化過程；

S22：分別提取圖像的形狀特征、顏色特征和紋理特征；

S23：對三種圖像特征拼接而成的新特征進(jìn)行聚類；

S24：得到每張服裝圖像所對應(yīng)的聚類中心描述；

S25：創(chuàng)建圖像索引文件。

4.根據(jù)權(quán)利要求3所述的基于多模態(tài)的服裝圖像檢索方法，其特征在于，步驟S3中所述服裝圖像是本地上傳的包含服裝的圖像，所述文本描述可以通過勾選服裝類別或者用戶輸入自定義文本獲取得到。

5.根據(jù)權(quán)利要求4所述的基于多模態(tài)的服裝圖像檢索方法，其特征在于，步驟S4中所述的通過文本檢索得到候選集Q1，是利用用戶勾選的服裝類別或輸入的自定義文本，通過文本檢索接口，得到對應(yīng)的檢索候選集Q1。

6.根據(jù)權(quán)利要求5所述的基于多模態(tài)的服裝圖像檢索方法，其特征在于，步驟S5的具體分步驟為：

S51：對待檢索服裝圖像進(jìn)行預(yù)處理操作，包括灰度處理和尺度歸一化；

S52：提取待檢索服裝圖像的形狀特征、顏色特征和紋理特征；

S53：根據(jù)特征庫的聚類中心獲取待檢索圖像的聚類中心描述；

S54：通過圖像多特征檢索接口，對圖集Q1中的所有候選圖進(jìn)行篩選，得到圖像特征相同或相似的候選集Q2。

7.根據(jù)權(quán)利要求6所述的基于多模態(tài)的服裝圖像檢索方法，其特征在于，步驟S6的具體分步驟為：

S61：經(jīng)過步驟S5，系統(tǒng)反饋給用戶初步的候選集Q2，用戶從候選集Q2中選擇符合自己檢索要求的服裝作為反饋信息提交給系統(tǒng)；

S62：系統(tǒng)獲取用戶的反饋信息，通過數(shù)據(jù)庫查詢到其具體特征描述；

S63：通過計算與候選集Q2中其他圖像的特征距離，得到服裝圖像間的相似度；

S64：按照相似度由高到低，對候選集Q2中圖像進(jìn)行重新排列，得到最終結(jié)果集R。