[發明專利]人臉遮擋部位的識別方法及系統

有效

• 申請號: 202110471266.4
• 申請日: 2021-04-29
• 公開（公告）號: CN113158939B
• 公開（公告）日: 2022-08-23
• 發明（設計）人: 楊帆;朱瑩
• 申請（專利權）人: 南京甄視智能科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/764;G06V10/82;G06N3/04;G06N3/08
• 代理公司: 北京德崇智捷知識產權代理有限公司 11467
• 代理人: 曹婷

本發明公開了一種人臉遮擋部位的識別方法及系統，涉及人臉識別技術領域，解決了有遮擋人臉識別準確率不高的技術問題，其技術方案要點是使用人臉關鍵點遮擋圖像和人臉圖像共同訓練人臉遮擋識別模型，并根據人臉關鍵點對投入訓練的圖像特征圖進行水平切分，減少不同部位遮擋的干擾。該人臉遮擋識別模型可準確地識別出眼部、鼻子、嘴巴關鍵部位有無遮擋，在面部有遮擋的情況下，可提示用戶進行相應的調整，以確保人臉識別的準確度。

技術領域

本公開涉及人臉識別技術領域，尤其涉及一種人臉遮擋部位的識別方法及系統。

背景技術

目前，隨著人臉識別技術日漸成熟，人臉識別技術已經廣泛應用于交通、教育、醫療、金融等行業。在實際應用場景中，人臉圖像會出現遮擋的情況，比如頭發、墨鏡、手機等，遮擋會使得人臉圖像丟失關鍵信息，從而影響人臉識別的準確度。

在身份信息要求嚴格的智能化場景，需要求用戶在面部關鍵部位無遮擋的情況進行人臉識別，以保證正確的身份信息。因此，亟需一種人臉遮擋部位的識別方法，準確地識別出人臉關鍵部位是否有遮擋從而進一步對人臉進行識別。

發明內容

本公開提供了一種人臉遮擋部位的識別方法及系統，其技術目的是提高對遮擋人臉識別的準確率。

本公開的上述技術目的是通過以下技術方案得以實現的：

一種人臉遮擋部位的識別方法，包括：

輸入人臉圖像，提取人臉關鍵點，根據人臉關鍵點和遮擋物品對所述人臉圖像進行合成，得到人臉關鍵點遮擋圖像；其中，所述人臉關鍵點包括左眼、右眼、雙眼、鼻子、嘴巴；

對所述人臉圖像和所述人臉關鍵點遮擋圖像進行標注，得到有遮擋圖像和無遮擋圖像；其中，有遮擋圖像包括單一遮擋圖像和復合遮擋圖像，所述單一遮擋圖像即僅遮擋一個人臉關鍵點的圖像，復合遮擋圖像即遮擋一個以上人臉關鍵點的圖像；

對所述有遮擋圖像和所述無遮擋圖像進行特征提取，得到特征圖；

將所述特征圖按照人臉關鍵點進行水平切分，得到第一特征圖、第二特征圖和第三特征圖；

將所述第一特征圖、第二特征圖和第三特征圖分別投入到所述卷積神經網絡的第一分類器、第二分類器和第三分類器進行訓練，得到人臉遮擋識別模型；

根據所述人臉遮擋識別模型對人臉進行識別。

一種人臉遮擋部位的識別系統，包括：

圖像合成模塊，輸入人臉圖像，提取人臉關鍵點，根據人臉關鍵點和遮擋物品對所述人臉圖像進行合成，得到人臉關鍵點遮擋圖像；其中，所述人臉關鍵點包括左眼、右眼、雙眼、鼻子、嘴巴；

標注模塊，對所述人臉圖像和所述人臉關鍵點遮擋圖像進行標注，得到有遮擋圖像和無遮擋圖像；其中，有遮擋圖像包括單一遮擋圖像和復合遮擋圖像，所述單一遮擋圖像即僅遮擋一個人臉關鍵點的圖像，復合遮擋圖像即遮擋一個以上人臉關鍵點的圖像；

訓練模塊，對所述有遮擋圖像和所述無遮擋圖像進行訓練，得到人臉遮擋識別模型；

識別模塊，根據所述人臉遮擋識別模型對人臉進行識別；

其中，所述訓練模塊為卷積神經網絡，包括：

特征提取單元，對所述有遮擋圖像和所述無遮擋圖像進行特征提取，得到特征圖；

特征切分單元，將所述特征圖按照人臉關鍵點進行水平切分，得到第一特征圖、第二特征圖和第三特征圖；

訓練單元，將所述第一特征圖、第二特征圖和第三特征圖分別投入到所述卷積神經網絡的第一分類器、第二分類器和第三分類器進行訓練，得到人臉遮擋識別模型。