[發明專利]一種人臉識別方法、裝置及電子設備

在審

• 申請號: 201910093662.0
• 申請日: 2019-01-30
• 公開（公告）號: CN109670487A
• 公開（公告）日: 2019-04-23
• 發明（設計）人: 彭菲;黃磊;王朋遠;張健
• 申請（專利權）人: 漢王科技股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06T17/00
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 莎日娜

本申請提供了一種人臉識別方法，屬于人臉識別技術領域，解決了現有技術中人臉識別安全性低的問題。所述方法包括：獲取待識別人臉的人臉圖像對，該人臉圖像對包括可見光圖像和深度圖像；確定上述深度圖像中的人臉關鍵點；根據上述深度圖像中的人臉關鍵點對該深度圖像進行三維重建，構建人臉點云；通過預設第一網絡模型基于所述人臉點云獲取所述待識別人臉的三維特征，以及，通過預設第二網絡模型基于上述可見光圖像獲取該待識別人臉的二維特征；根據上述三維特征和上述二維特征對該待識別人臉進行人臉識別。本申請公開的人臉識別方法通過結合人臉的三維結構化特征和二維特征進行人臉識別，有效提升了人臉識別的安全性。

技術領域

本申請涉及人臉識別技術領域，尤其涉及一種人臉識別方法、裝置及電子設備。

背景技術

人臉識別技術被廣泛應用于考勤，地鐵機場安檢，電子支付等生物特征識別領域，它在給人們生活帶來極大便利的同時也給人們的生活帶來了一些安全隱患。隨著電子設備的普及，個人移動設備中通常攜帶有個人照片和視頻，這些個人照片和視頻如果被用于攻擊現有的二維人臉識別系統，將會對人臉識別系統的安全帶來極大隱患。近年來，隨著結構光圖像采集設備的發展，三維人臉信息的獲取也變得越來越容易，因此如何基于結構光圖像采集設備采集的人臉圖像中的三維人臉特征進行人臉識別，以提升人臉識別方法安全性是一個迫切需要解決的問題。

發明內容

本申請實施例提供一種人臉識別方法，以提升人臉識別方法的安全性。

第一方面，本申請實施例提供了一種人臉識別方法，包括：

獲取待識別人臉的人臉圖像對，所述人臉圖像對包括可見光圖像和深度圖像；

確定所述深度圖像中的人臉關鍵點；

根據所述深度圖像中的所述人臉關鍵點對所述深度圖像進行三維重建，構建人臉點云；

通過預設第一網絡模型基于所述人臉點云獲取所述待識別人臉的三維特征，以及，通過預設第二網絡模型基于所述可見光圖像獲取所述待識別人臉的二維特征；

根據所述三維特征和所述二維特征對所述待識別人臉進行人臉識別。

可選的，所述人臉關鍵點包括鼻尖，所述根據所述深度圖像中的所述人臉關鍵點對所述深度圖像進行三維重建，構建人臉點云的步驟，包括：

根據所述深度圖像中人臉區域內與所述鼻尖的歐式距離小于預設距離閾值的像素點重建三維點云，確定人臉點云。

可選的，所述人臉關鍵點還包括兩個瞳孔和兩個嘴角，所述根據所述深度圖像中人臉區域內與所述鼻尖的歐式距離小于預設距離閾值的像素點重建三維點云，確定人臉點云的步驟之前，還包括：

根據所述鼻尖、兩個瞳孔和兩個嘴角中的任意一個或多個人臉關鍵點，確定所述深度圖像中的人臉區域。

可選的，所述根據所述三維特征和所述二維特征對所述待識別人臉進行人臉識別的步驟，包括：

通過將所述待識別人臉的所述三維特征和所述二維特征與預設人臉庫中的各人臉模版的三維特征和二維特征進行對應匹配，分別確定所述待識別人臉與各所述人臉模版的三維特征相似度得分和二維特征相似度得分；

對于每個所述人臉模版，將所述待識別人臉與所述人臉模版的三維特征相似度得分和二維特征相似度得分進行加權運算，確定所述待識別人臉與所述人臉模版的人臉匹配度得分。

可選的，所述確定所述深度圖像中的人臉關鍵點的步驟，包括：

確定所述可見光圖像中的人臉關鍵點；

根據所述可見光圖像和所述深度圖像的像素點對應關系，將所述可見光圖像中的人臉關鍵點映射到所述深度圖像中，確定所述深度圖像中的所述人臉關鍵點。