[發明專利]目標對象遮擋檢測方法及裝置

有效

• 申請號: 201611191940.9
• 申請日: 2016-12-21
• 公開（公告）號: CN106650662B
• 公開（公告）日: 2021-03-23
• 發明（設計）人: 周舒暢;何蔚然;張弛
• 申請（專利權）人: 北京曠視科技有限公司;北京邁格威科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/02
• 代理公司: 北京市磐華律師事務所 11336
• 代理人: 高偉;卜璐璐

1.一種人臉遮擋檢測方法，其特征在于，所述人臉遮擋檢測方法包括：

接收輸入圖像；

利用訓練好的神經網絡檢測所述輸入圖像中的人臉、并輸出所述人臉的熱力圖，所述熱力圖中示出了熱力圖形式的人臉；以及

基于所述熱力圖檢測所述人臉是否存在遮擋；

所述基于所述熱力圖檢測所述人臉是否存在遮擋的步驟包括：

檢測所述熱力圖中的人臉的形狀是否符合所述人臉的類別的對象的形狀，當所述熱力圖中的人臉的形狀符合所述人臉的類別的對象的形狀時，確定所述人臉不存在遮擋，反之，則確定所述人臉存在遮擋；或者

檢測所述熱力圖中的人臉的區域是否為連通區域，當檢測到所述熱力圖中的人臉的區域為連通區域時，確定所述人臉不存在遮擋，反之，則確定所述人臉存在遮擋。

2.根據權利要求1所述的人臉遮擋檢測方法，其特征在于，所述訓練好的神經網絡為全卷積神經網絡；所述全卷積神經網絡是從能識別人臉的卷積神經網絡中提取出嵌入映射后接上熱力圖輸出層構成的；所述熱力圖輸出層包括卷積層。

3.根據權利要求1所述的人臉遮擋檢測方法，其特征在于，所述訓練好的神經網絡為全卷積神經網絡；所述全卷積神經網絡基于將訓練好的能識別人臉的卷積神經網絡的全連接層替換為卷積層而生成。

4.根據權利要求3所述的人臉遮擋檢測方法，其特征在于，所述卷積層為1×1卷積層。

5.根據權利要求3所述的人臉遮擋檢測方法，其特征在于，所述全卷積神經網絡還包括上采樣層。

6.根據權利要求2所述的人臉遮擋檢測方法，其特征在于，所述熱力圖輸出層還包括上采樣層。

7.根據權利要求5或6所述的人臉遮擋檢測方法，其特征在于，所述上采樣層的數目取決于所述輸出的熱力圖的期望分辨率。

8.根據權利要求2或3所述的人臉遮擋檢測方法，其特征在于，所述全卷積神經網絡是通過如下步驟訓練的：

在預訓練階段，訓練能夠識別人臉的卷積神經網絡；

在微調階段，基于所述能夠識別人臉的卷積神經網絡生成全卷積神經網絡，并通過訓練而使所述全卷積神經網絡成為輸出熱力圖的神經網絡。

9.根據權利要求1所述的人臉遮擋檢測方法，其特征在于，所述人臉遮擋檢測方法還包括：

在輸出所述熱力圖后，對所述熱力圖中的人臉進行標注；并且

對 所述人臉是否存在遮擋的檢測是基于經所述標注后的熱力圖。

10.根據權利要求1所述的人臉遮擋檢測方法，其特征在于，所述人臉遮擋檢測方法還包括：

當檢測到所述熱力圖中的人臉存在遮擋時，確定遮擋區域。

11.一種人臉遮擋檢測裝置，其特征在于，所述人臉遮擋檢測裝置包括：

接收模塊，用于接收輸入圖像；

熱力圖輸出模塊，用于利用訓練好的神經網絡檢測所述輸入圖像中的人臉、并輸出所述人臉的熱力圖，所述熱力圖中示出了熱力圖形式的人臉；以及

遮擋檢測模塊，用于基于所述熱力圖檢測所述人臉是否存在遮擋；

所述遮擋檢測模塊還用于：

檢測所述熱力圖中的人臉的形狀是否符合所述人臉的類別的對象的形狀，當所述熱力圖中的人臉的形狀符合所述人臉的類別的對象的形狀時，確定所述人臉不存在遮擋，反之，則確定所述人臉存在遮擋；或者

檢測所述熱力圖中的人臉的區域是否為連通區域，當檢測到所述熱力圖中的人臉的區域為連通區域時，確定所述人臉不存在遮擋，反之，則確定所述人臉存在遮擋。

12.根據權利要求11所述的人臉遮擋檢測裝置，其特征在于，所述訓練好的神經網絡為全卷積神經網絡；所述全卷積神經網絡是從能識別人臉的卷積神經網絡中提取出嵌入映射后接上熱力圖輸出層構成的；所述熱力圖輸出層包括卷積層。