[發(fā)明專(zhuān)利]圖像處理方法、裝置、電子設(shè)備及存儲(chǔ)介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202010415459.3
• 申請(qǐng)日: 2020-05-15
• 公開(kāi)（公告）號(hào): CN111783519A
• 公開(kāi)（公告）日: 2020-10-16
• 發(fā)明（設(shè)計(jì)）人: 劉佳軍
• 申請(qǐng)（專(zhuān)利權(quán)）人: 北京邁格威科技有限公司
• 主分類(lèi)號(hào): G06K9/00
• 分類(lèi)號(hào): G06K9/00;G06N3/04;G06N3/08
• 代理公司: 北京潤(rùn)澤恒知識(shí)產(chǎn)權(quán)代理有限公司 11319
• 代理人: 王婷婷

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取包含目標(biāo)物的待處理圖像；

將包含目標(biāo)物的待處理圖像輸入到特征提取網(wǎng)絡(luò)，以得到待處理圖像中的目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征，其中，特征提取網(wǎng)絡(luò)被配置為：

確定所述待處理圖像中的多個(gè)目標(biāo)特征點(diǎn)；

對(duì)于每一個(gè)目標(biāo)特征點(diǎn)，基于所述目標(biāo)特征點(diǎn)的位置，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域；利用所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的卷積核從所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域提取特征，得到所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征，其中，對(duì)于特征提取網(wǎng)絡(luò)中的每一個(gè)包括目標(biāo)特征點(diǎn)對(duì)應(yīng)的卷積核的卷積層，所述卷積層包括至少一個(gè)權(quán)重與所述卷積層中的其他的卷積核的權(quán)重不同的卷積核。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述對(duì)于每一個(gè)目標(biāo)特征點(diǎn)，基于所述目標(biāo)特征點(diǎn)的位置，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域包括：

對(duì)于每一個(gè)目標(biāo)特征點(diǎn)，基于所述目標(biāo)特征點(diǎn)的位置和徑向基函數(shù)，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域。

3.根據(jù)權(quán)利要求2所述的方法，其特征在于，所述基于所述目標(biāo)特征點(diǎn)的位置和徑向基函數(shù)，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域包括：

基于所述目標(biāo)特征點(diǎn)的位置，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的候選特征提取區(qū)域；

基于徑向基函數(shù)和所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的候選特征提取區(qū)域，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域。

4.根據(jù)權(quán)利要求2或3所述的方法，其特征在于，在將包含目標(biāo)物的待處理圖像輸入到特征提取網(wǎng)絡(luò)之前，所述方法還包括：

對(duì)特征提取網(wǎng)絡(luò)進(jìn)行訓(xùn)練，對(duì)特征提取網(wǎng)絡(luò)進(jìn)行訓(xùn)練包括：

將用于訓(xùn)練特征提取網(wǎng)絡(luò)的樣本圖像輸入到特征提取網(wǎng)絡(luò)，得到預(yù)測(cè)結(jié)果，所述預(yù)測(cè)結(jié)果包括：所述用于訓(xùn)練特征提取網(wǎng)絡(luò)的樣本圖像中的多個(gè)樣本特征點(diǎn)中的每一個(gè)樣本特征點(diǎn)對(duì)應(yīng)的預(yù)測(cè)特征；

利用預(yù)設(shè)損失函數(shù)基于所述預(yù)測(cè)結(jié)果和所述用于訓(xùn)練特征提取網(wǎng)絡(luò)的圖像的標(biāo)注信息，計(jì)算損失函數(shù)值；

基于所述損失函數(shù)值，更新所述每一個(gè)目標(biāo)特征點(diǎn)對(duì)應(yīng)的卷積核的權(quán)重和所述徑向基函數(shù)中的與所述損失函數(shù)值相關(guān)的參數(shù)的參數(shù)值。

5.根據(jù)權(quán)利要求1所述的方法，其特征在于，對(duì)于所述每一個(gè)目標(biāo)特征點(diǎn)，所述目標(biāo)特征點(diǎn)為所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域的中心點(diǎn)。

6.根據(jù)權(quán)利要求1所述的方法，其特征在于，對(duì)于所述每一個(gè)目標(biāo)特征點(diǎn)，所述目標(biāo)特征點(diǎn)的位置基于多個(gè)用于訓(xùn)練特征提取網(wǎng)絡(luò)的樣本圖像中的與所述目標(biāo)特征點(diǎn)屬于同一類(lèi)型的樣本特征點(diǎn)的位置確定。

7.根據(jù)權(quán)利要求1-6之一所述的方法，其特征在于，所述待處理圖像為人臉圖像。

8.根據(jù)權(quán)利要求7所述的方法，其特征在于，所述待處理圖像為人臉圖像，所述多個(gè)目標(biāo)特征點(diǎn)為多個(gè)人臉特征點(diǎn)，目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征為人臉特征點(diǎn)對(duì)應(yīng)的人臉特征；以及

所述方法還包括：

基于所述多個(gè)人臉特征點(diǎn)中的每一個(gè)人臉特征點(diǎn)對(duì)應(yīng)的人臉特征和多個(gè)參考人臉圖像的預(yù)設(shè)人臉特征信息，對(duì)所述人臉圖像所屬的用戶(hù)進(jìn)行人臉識(shí)別。

9.一種圖像處理裝置，其特征在于，所述裝置包括：

獲取單元，被配置為獲取包含目標(biāo)物的待處理圖像；

處理單元，被配置為將包含目標(biāo)物的待處理圖像輸入到特征提取網(wǎng)絡(luò)，以得到待處理圖像中的目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征，其中，特征提取網(wǎng)絡(luò)被配置為：確定所述待處理圖像中的多個(gè)目標(biāo)特征點(diǎn)；對(duì)于每一個(gè)目標(biāo)特征點(diǎn)，基于所述目標(biāo)特征點(diǎn)的位置，確定所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域；利用所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的卷積核從所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征提取區(qū)域提取特征，得到所述目標(biāo)特征點(diǎn)對(duì)應(yīng)的特征，其中，對(duì)于特征提取網(wǎng)絡(luò)中的每一個(gè)包括目標(biāo)特征點(diǎn)對(duì)應(yīng)的卷積核的卷積層，所述卷積層包括至少一個(gè)權(quán)重與所述卷積層中的其他的卷積核的權(quán)重不同的卷積核。