[發(fā)明專利]提取圖像的特征圖的方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201910098620.6
• 申請(qǐng)日: 2019-01-31
• 公開(kāi)（公告）號(hào): CN109840528A
• 公開(kāi)（公告）日: 2019-06-04
• 發(fā)明（設(shè)計(jì)）人: 喻冬東;王長(zhǎng)虎
• 申請(qǐng)（專利權(quán)）人: 北京字節(jié)跳動(dòng)網(wǎng)絡(luò)技術(shù)有限公司
• 主分類號(hào): G06K9/46
• 分類號(hào): G06K9/46;G06K9/62
• 代理公司: 北京英賽嘉華知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

1.一種提取圖像的特征圖的方法，包括：

獲取待檢測(cè)圖像；

將所述待檢測(cè)圖像輸入特征提取網(wǎng)絡(luò)，所述特征提取網(wǎng)絡(luò)包括至少三個(gè)特征提取層；

從所述至少三個(gè)特征提取層輸出的特征圖中選取三個(gè)特征圖，基于所述三個(gè)特征圖，得到所述待檢測(cè)圖像對(duì)應(yīng)的特征圖。

2.根據(jù)權(quán)利要求1所述的方法，其中，所述方法還包括：

將所述待檢測(cè)圖像的特征圖輸入預(yù)先訓(xùn)練的姿態(tài)預(yù)測(cè)網(wǎng)絡(luò)，得到待檢測(cè)圖像中顯示的人體的姿態(tài)信息，其中，所述姿態(tài)預(yù)測(cè)網(wǎng)絡(luò)用于表征圖像的特征圖與圖像中顯示的人體的姿態(tài)信息的對(duì)應(yīng)關(guān)系。

3.根據(jù)權(quán)利要求1所述的方法，其中，所述方法還包括：

將所述待檢測(cè)圖像的特征圖輸入預(yù)先訓(xùn)練的圖像分割網(wǎng)絡(luò)，得到對(duì)于待檢測(cè)圖像中顯示的至少一個(gè)對(duì)象的分割結(jié)果信息，其中，所述圖像分割網(wǎng)絡(luò)用于表征圖像的特征圖與對(duì)圖像中顯示的至少一個(gè)對(duì)象的分割結(jié)果信息的對(duì)應(yīng)關(guān)系。

4.根據(jù)權(quán)利要求1-3中任一所述的方法，其中，所述從所述至少三個(gè)特征提取層輸出的特征圖中選取三個(gè)特征圖，基于所述三個(gè)特征圖，得到所述待檢測(cè)圖像對(duì)應(yīng)的特征圖，包括：

從所述至少三個(gè)特征提取層輸出的特征圖中選取分辨率滿足預(yù)設(shè)條件的三個(gè)特征圖，將所述三個(gè)特征圖進(jìn)行融合，得到所述待檢測(cè)圖像對(duì)應(yīng)的特征圖。

5.根據(jù)權(quán)利要求4所述的方法，其中，所述從所述至少三個(gè)特征提取層輸出的特征圖中選取分辨率滿足預(yù)設(shè)條件的三個(gè)特征圖，包括：

對(duì)于所述至少三個(gè)特征提取層輸出的特征圖，按照分辨率由小到大的順序，選取兩個(gè)特征圖作為第一特征圖和第二特征圖；選取分辨率與所述待檢測(cè)圖像的分辨率的比值等于預(yù)設(shè)閾值的特征圖作為第三特征圖。

6.根據(jù)權(quán)利要求4所述的方法，其中，所述從所述至少三個(gè)特征提取層輸出的特征圖中選取分辨率滿足預(yù)設(shè)條件的三個(gè)特征圖，包括：

對(duì)于所述至少三個(gè)特征提取層輸出的特征圖，選取分辨率位于第一分辨率區(qū)間的特征圖作為第一特征圖；選取分辨率位于第二分辨率區(qū)間的特征圖作為第二特征圖；選取分辨率位于第三分辨率區(qū)間的特征圖作為第三特征圖。

7.一種提取圖像的特征圖的裝置，包括：

獲取單元，被配置成獲取待檢測(cè)圖像；

特征提取單元，被配置成將所述待檢測(cè)圖像輸入特征提取網(wǎng)絡(luò)，所述特征提取網(wǎng)絡(luò)包括至少三個(gè)特征提取層；

特征融合單元，被配置成從所述至少三個(gè)特征提取層輸出的特征圖中選取三個(gè)特征圖，基于所述三個(gè)特征圖，得到所述待檢測(cè)圖像對(duì)應(yīng)的特征圖。

8.根據(jù)權(quán)利要求7所述的裝置，其中，所述裝置還包括：

姿態(tài)預(yù)測(cè)單元，被配置成將所述待檢測(cè)圖像的特征圖輸入預(yù)先訓(xùn)練的姿態(tài)預(yù)測(cè)網(wǎng)絡(luò)，得到待檢測(cè)圖像中顯示的人體的姿態(tài)信息，其中，所述姿態(tài)預(yù)測(cè)網(wǎng)絡(luò)用于表征圖像的特征圖與圖像中顯示的人體的姿態(tài)信息的對(duì)應(yīng)關(guān)系。

9.根據(jù)權(quán)利要求7所述的裝置，其中，所述裝置還包括：

分割單元，被配置成將所述待檢測(cè)圖像的特征圖輸入預(yù)先訓(xùn)練的圖像分割網(wǎng)絡(luò)，得到對(duì)于待檢測(cè)圖像中顯示的至少一個(gè)對(duì)象的分割結(jié)果信息，其中，所述圖像分割網(wǎng)絡(luò)用于表征圖像的特征圖與對(duì)圖像中顯示的至少一個(gè)對(duì)象的分割結(jié)果信息的對(duì)應(yīng)關(guān)系。

10.根據(jù)權(quán)利要求7-9中任一所述的裝置，其中，所述特征融合單元進(jìn)一步被配置成：

從所述至少三個(gè)特征提取層輸出的特征圖中選取分辨率滿足預(yù)設(shè)條件的三個(gè)特征圖，將所述三個(gè)特征圖進(jìn)行融合，得到所述待檢測(cè)圖像對(duì)應(yīng)的特征圖。

11.根據(jù)權(quán)利要求10所述的裝置，其中，所述特征融合單元進(jìn)一步被配置成：

對(duì)于所述至少三個(gè)特征提取層輸出的特征圖，按照分辨率由小到大的順序，選取兩個(gè)特征圖作為第一特征圖和第二特征圖；選取分辨率與所述待檢測(cè)圖像的分辨率的比值等于預(yù)設(shè)閾值的特征圖作為第三特征圖。