[發(fā)明專利]圖片檢索方法和裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201410395792.7
• 申請(qǐng)日: 2014-08-12
• 公開（公告）號(hào): CN105468596B
• 公開（公告）日: 2019-06-18
• 發(fā)明（設(shè)計(jì)）人: 姚伶伶;赫南;何琪;胡繁星;衛(wèi)望;王兵
• 申請(qǐng)（專利權(quán)）人: 騰訊科技（深圳）有限公司
• 主分類號(hào): G06F16/583
• 分類號(hào): G06F16/583
• 代理公司: 北京三高永信知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 王麗

1.一種圖片檢索方法，其特征在于，所述方法包括：

獲取多個(gè)種子圖片的特征向量，所述特征向量由神經(jīng)網(wǎng)絡(luò)中提取的種子圖片的多層特征組成，所述多個(gè)種子圖片覆蓋圖片庫(kù)中多個(gè)圖片類型；

根據(jù)多個(gè)種子圖片的特征向量，生成多個(gè)種子圖片的至少一個(gè)視覺(jué)單詞，所述至少一個(gè)視覺(jué)單詞用于表示多個(gè)種子圖片的語(yǔ)義；

根據(jù)多個(gè)種子圖片的特征向量和至少一個(gè)視覺(jué)單詞，獲取每個(gè)視覺(jué)單詞的至少一個(gè)種子圖片和至少一個(gè)特征向量；

對(duì)于待檢索的指定圖片，獲取所述指定圖片的特征向量，作為第一特征向量，根據(jù)所述第一特征向量，生成至少一個(gè)指定視覺(jué)單詞；

基于每個(gè)視覺(jué)單詞的至少一個(gè)特征向量，確定所述至少一個(gè)指定視覺(jué)單詞的至少一個(gè)特征向量，作為第二特征向量；

計(jì)算所述指定圖片的特征向量與所述至少一個(gè)第二特征向量之間的相似度；

按照相似度從大到小的順序，從所述至少一個(gè)第二特征向量中，提取至少一個(gè)特征向量，作為第三特征向量；

獲取所述至少一個(gè)第三特征向量對(duì)應(yīng)的至少一個(gè)種子圖片，作為所述指定圖片的相似圖片。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述方法還包括：

當(dāng)獲取到指定圖片的至少一個(gè)相似圖片時(shí)，根據(jù)所述指定圖片與所述至少一個(gè)相似圖片之間的相似度以及所述至少一個(gè)相似圖片的語(yǔ)義，獲取所述指定圖片的語(yǔ)義。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述根據(jù)所述指定圖片與所述至少一個(gè)相似圖片之間的相似度以及所述至少一個(gè)相似圖片的語(yǔ)義，獲取所述指定圖片的語(yǔ)義包括：

對(duì)于每個(gè)相似圖片，獲取所述相似圖片的至少一個(gè)語(yǔ)義單詞和所述至少一個(gè)語(yǔ)義單詞的第一權(quán)重；

獲取所述指定圖片與所述相似圖片之間的相似度；

對(duì)于所述相似圖片的每個(gè)語(yǔ)義單詞，計(jì)算所述相似度與所述語(yǔ)義單詞的第一權(quán)重的乘積，作為所述語(yǔ)義單詞的第二權(quán)重；

按照第二權(quán)重從大到小的順序，從所述至少一個(gè)相似圖片的至少一個(gè)語(yǔ)義單詞中，提取至少一個(gè)語(yǔ)義單詞，作為所述指定圖片的語(yǔ)義單詞。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述獲取所述相似圖片的至少一個(gè)語(yǔ)義單詞和所述至少一個(gè)語(yǔ)義單詞的第一權(quán)重包括：

獲取所述相似圖片的至少一個(gè)文字描述塊，為所述至少一個(gè)文字描述塊分配權(quán)重；

根據(jù)文字描述塊中的每個(gè)單詞的出現(xiàn)次數(shù)和所述至少一個(gè)文字描述塊的數(shù)目，計(jì)算每個(gè)單詞的逆向頻率，所述逆向頻率用于表示單詞對(duì)所述相似圖片的重要程度；

對(duì)于每個(gè)文字描述塊，計(jì)算所述文字描述塊中每個(gè)單詞的逆向頻率與所述文字描述塊的權(quán)重的乘積，作為每個(gè)單詞的第一權(quán)重；

按照第一權(quán)重從大到小的順序，從所述至少一個(gè)文字描述塊中的每個(gè)單詞中，提取至少一個(gè)單詞，作為所述相似圖片的至少一個(gè)語(yǔ)義單詞；

確定所述至少一個(gè)語(yǔ)義單詞的第一權(quán)重。

5.一種圖片檢索裝置，其特征在于，所述裝置包括：

特征向量獲取模塊，用于獲取多個(gè)種子圖片的特征向量，所述特征向量由神經(jīng)網(wǎng)絡(luò)中提取的種子圖片的多層特征組成，所述多個(gè)種子圖片覆蓋圖片庫(kù)中多個(gè)圖片類型；

視覺(jué)單詞生成模塊，用于根據(jù)多個(gè)種子圖片的特征向量，生成多個(gè)種子圖片的至少一個(gè)視覺(jué)單詞，所述至少一個(gè)視覺(jué)單詞用于表示多個(gè)種子圖片的語(yǔ)義；

視覺(jué)單詞索引模塊，用于根據(jù)多個(gè)種子圖片的特征向量和至少一個(gè)視覺(jué)單詞，獲取每個(gè)視覺(jué)單詞的至少一個(gè)種子圖片和至少一個(gè)特征向量；

圖片檢索模塊，包括：

指定獲取單元，用于對(duì)于待檢索的指定圖片，獲取所述指定圖片的特征向量，作為第一特征向量，根據(jù)所述第一特征向量，生成至少一個(gè)指定視覺(jué)單詞；

第二特征向量確定單元，用于基于每個(gè)視覺(jué)單詞的至少一個(gè)特征向量，確定所述至少一個(gè)指定視覺(jué)單詞的至少一個(gè)特征向量，作為第二特征向量；

相似度計(jì)算單元，用于計(jì)算所述指定圖片的特征向量與所述至少一個(gè)第二特征向量之間的相似度；

第三特征向量提取單元，用于按照相似度從大到小的順序，從所述至少一個(gè)第二特征向量中，提取至少一個(gè)特征向量，作為第三特征向量；

相似圖片獲取單元，用于獲取所述至少一個(gè)第三特征向量對(duì)應(yīng)的至少一個(gè)種子圖片，作為所述指定圖片的相似圖片。