[發(fā)明專利]圖像處理方法和裝置、存儲介質(zhì)和電子設(shè)備

有效

• 申請?zhí)枺?/td>: 202010664687.4
• 申請日: 2020-07-10
• 公開（公告）號: CN111797266B
• 公開（公告）日: 2022-02-08
• 發(fā)明（設(shè)計）人: 蘇凱;王長虎
• 申請（專利權(quán)）人: 北京字節(jié)跳動網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號: G06F16/583
• 分類號: G06F16/583;G06F16/532;G06F16/55
• 代理公司: 北京英創(chuàng)嘉友知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11447
• 代理人: 王曉霞

本公開涉及一種圖像處理方法和裝置、存儲介質(zhì)和電子設(shè)備，所述方法包括：將待處理圖像輸入圖像處理模型；獲取圖像處理模型輸出的檢索標(biāo)簽和入庫標(biāo)簽，其中，所述圖像處理模型包括用于輸出檢索標(biāo)簽的檢索分支，和用于輸出入庫標(biāo)簽的入庫分支，所述檢索分支，用于從所述待處理圖像中提取第一檢索特征，并基于所述第一檢索特征和第二檢索特征輸出所述檢索標(biāo)簽；所述入庫分支，用于從所述待處理圖像中提取第一入庫特征，并基于所述第一入庫特征和第二入庫特征輸出所述入庫標(biāo)簽；其中，所述第二檢索特征是由所述第一入庫特征轉(zhuǎn)換得到的，所述第二入庫特征是由所述第一檢索特征轉(zhuǎn)換得到的。減少需要進(jìn)行訓(xùn)練、維護(hù)的模型的數(shù)量，提升了提升模型的準(zhǔn)確性和訓(xùn)練效率。

技術(shù)領(lǐng)域

本公開涉及圖像處理領(lǐng)域，具體地，涉及一種圖像處理方法和裝置、存儲介質(zhì)和電子設(shè)備。

背景技術(shù)

在涉及視覺搜索的場景下，通常需要將待查詢的圖像中物體的特征與數(shù)據(jù)庫中的圖像的特征進(jìn)行比對，從而得到特征匹配的圖像。而在大量業(yè)務(wù)場景下，待查詢的圖像中可能存在值得查詢的物體特征，也可能是沒有物體或者沒有值得查詢的物體的圖像，而數(shù)據(jù)庫需要大量的存儲數(shù)據(jù)以支撐查詢,數(shù)據(jù)庫中的圖像需要包括各種形式的物體。

因此，在此需求下，產(chǎn)生了兩種針對特征判斷的要求，對判斷圖像是否需要進(jìn)行查詢而言，需要嚴(yán)格的判定標(biāo)準(zhǔn)，判定出物體的種類，篩選掉可能導(dǎo)致誤判別的無關(guān)物體或其他無需檢索的物體類別，而對判斷圖像是否需要加入數(shù)據(jù)庫而言，需要相對寬松的判定標(biāo)準(zhǔn)，以使數(shù)據(jù)庫中存儲的圖像數(shù)據(jù)更加豐富，更有利于查找。目前，通常使用兩個模型分別執(zhí)行兩種判斷方式，但是兩個模型都需要進(jìn)行定期的維護(hù)迭代以保證模型的準(zhǔn)確度，維護(hù)成本較高。

發(fā)明內(nèi)容

提供該發(fā)明內(nèi)容部分以便以簡要的形式介紹構(gòu)思，這些構(gòu)思將在后面的具體實(shí)施方式部分被詳細(xì)描述。該發(fā)明內(nèi)容部分并不旨在標(biāo)識要求保護(hù)的技術(shù)方案的關(guān)鍵特征或必要特征，也不旨在用于限制所要求的保護(hù)的技術(shù)方案的范圍。

第一方面，本公開提供一種圖像處理方法，包括：將待處理圖像輸入圖像處理模型；獲取圖像處理模型輸出的檢索標(biāo)簽和入庫標(biāo)簽，其中，所述檢索標(biāo)簽用于表征待處理圖像中物體的類別，所述入庫標(biāo)簽用于表征是否將所述待處理圖像加入檢索庫中；其中，所述圖像處理模型包括用于輸出檢索標(biāo)簽的檢索分支，和用于輸出入庫標(biāo)簽的入庫分支，所述檢索分支，用于從所述待處理圖像中提取第一檢索特征，并基于所述第一檢索特征和第二檢索特征輸出所述檢索標(biāo)簽；所述入庫分支，用于從所述待處理圖像中提取第一入庫特征，并基于所述第一入庫特征和第二入庫特征輸出所述入庫標(biāo)簽；其中，所述第二檢索特征是由所述第一入庫特征轉(zhuǎn)換得到的，所述第二入庫特征是由所述第一檢索特征轉(zhuǎn)換得到的。

第二方面，本公開提供一種圖像處理裝置，包括：輸入模塊，用于將待處理圖像輸入圖像處理模型；獲取模塊，用于獲取圖像處理模型輸出的檢索標(biāo)簽和入庫標(biāo)簽，其中，所述檢索標(biāo)簽用于表征待處理圖像中物體的類別，所述入庫標(biāo)簽用于表征是否將所述待處理圖像加入檢索庫中；其中，所述圖像處理模型包括用于輸出檢索標(biāo)簽的檢索分支，和用于輸出入庫標(biāo)簽的入庫分支，所述檢索分支，用于從所述待處理圖像中提取第一檢索特征，并基于所述第一檢索特征和第二檢索特征輸出所述檢索標(biāo)簽；所述入庫分支，用于從所述待處理圖像中提取第一入庫特征，并基于所述第一入庫特征和第二入庫特征輸出所述入庫標(biāo)簽；其中，所述第二檢索特征是由所述第一入庫特征轉(zhuǎn)換得到的，所述第二入庫特征是由所述第一檢索特征轉(zhuǎn)換得到的。

第三方面，本公開提供一種計算機(jī)可讀介質(zhì)，其上存儲有計算機(jī)程序，該程序被處理裝置執(zhí)行時實(shí)現(xiàn)本公開第一方面中任一項(xiàng)所述方法的步驟。

第四方面，本公開提供一種電子設(shè)備，包括存儲裝置和處理裝置，其中，存儲裝置上存儲有計算機(jī)程序；處理裝置用于執(zhí)行所述存儲裝置中的所述計算機(jī)程序，以實(shí)現(xiàn)本公開第一方面中任一項(xiàng)所述方法的步驟。

基于上述的技術(shù)方案，至少可以達(dá)到以下的技術(shù)效果：