[發(fā)明專利]人臉識別方法與系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011449443.0
• 申請日: 2020-12-09
• 公開（公告）號: CN112418177A
• 公開（公告）日: 2021-02-26
• 發(fā)明（設(shè)計）人: 楊帆;陳凱琪;朱瑩;白立群;胡建國;王瀚洋
• 申請（專利權(quán)）人: 南京甄視智能科技有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N3/04
• 代理公司: 南京行高知識產(chǎn)權(quán)代理有限公司 32404
• 代理人: 王培松;王菊花

本發(fā)明提供一種人臉識別方法與系統(tǒng)，包括：基于佩戴口罩的人臉數(shù)據(jù)集，微調(diào)(Fine?Tune)已經(jīng)訓(xùn)練好的人臉識別模型獲得用于針對佩戴口罩人臉識別的戴口罩專用識別模型；結(jié)合佩戴口罩的人臉數(shù)據(jù)集與未佩戴口罩的人臉數(shù)據(jù)集訓(xùn)練二分類器，用于檢測人臉是否佩戴口罩；根據(jù)人臉關(guān)鍵點信息對人臉底庫中的圖片進(jìn)行口罩生成，并基于戴口罩專用識別模型得到戴口罩的人臉底庫；獲取待識別的照片；通過二分類器檢測照片中的人臉是否佩戴口罩，并進(jìn)行對應(yīng)的人臉識別：如佩戴口罩，則使用戴口罩專用識別模型進(jìn)行識別，根據(jù)與戴口罩的人臉底庫的比對結(jié)果進(jìn)行人臉識別；如果未佩戴口罩，則使用人臉識別模型進(jìn)行識別，根據(jù)與人臉底庫的比對結(jié)果進(jìn)行人臉識別。

技術(shù)領(lǐng)域

本發(fā)明涉及人臉識別技術(shù)領(lǐng)域，具體而言涉及一種基于生成口罩的人臉識別方法與系統(tǒng)。

背景技術(shù)

如圖1所示，在傳統(tǒng)的人臉識別中，需要每個用戶上傳一張照片/圖片作為人臉底庫圖片，通過特征提取后與用戶進(jìn)行關(guān)聯(lián)，用于后期通過人臉識別進(jìn)行身份的比對和認(rèn)證。一般上傳的底庫圖片都是不戴口罩的圖片。在某些特殊時期，會發(fā)現(xiàn)當(dāng)用戶戴上口罩之后，傳統(tǒng)的人臉識別技術(shù)就會存在無法識別的問題。

發(fā)明內(nèi)容

本發(fā)明目的在于提供一種基于生成口罩的人臉識別方法與系統(tǒng)，解決當(dāng)用戶只上傳一個普通照片的時候，人臉識別系統(tǒng)依然可以同時識別戴口罩和不戴口罩的用戶的問題。

為了實現(xiàn)上述目的，本發(fā)明的第一方面提出一種基于生成口罩的人臉識別方法，包括：

基于佩戴口罩的人臉數(shù)據(jù)集，微調(diào)(Fine-Tune)已經(jīng)訓(xùn)練好的人臉識別模型獲得用于針對佩戴口罩人臉識別的戴口罩專用識別模型，所述人臉識別模型為基于未佩戴口罩的人臉數(shù)據(jù)集而訓(xùn)練得到；

結(jié)合佩戴口罩的人臉數(shù)據(jù)集與未佩戴口罩的人臉數(shù)據(jù)集訓(xùn)練二分類器，用于檢測人臉是否佩戴口罩；

在已經(jīng)形成人臉底庫的基礎(chǔ)上，根據(jù)人臉關(guān)鍵點信息對人臉底庫中的圖片進(jìn)行口罩生成，并基于所述戴口罩專用識別模型得到戴口罩的人臉底庫；

獲取待識別的照片；

通過二分類器檢測照片中的人臉是否佩戴口罩，并進(jìn)行對應(yīng)的人臉識別，其中：

如果人臉佩戴口罩，則使用所述戴口罩專用識別模型進(jìn)行識別，根據(jù)與戴口罩的人臉底庫的比對結(jié)果進(jìn)行人臉識別；

如果人臉未佩戴口罩，則使用所述人臉識別模型進(jìn)行識別，根據(jù)與人臉底庫的比對結(jié)果進(jìn)行人臉識別。

優(yōu)選地，所述戴口罩的人臉底庫的獲取具體包括以下步驟：

在已經(jīng)形成人臉底庫的基礎(chǔ)上，根據(jù)不帶口罩的人臉底庫中的圖片，提取人臉關(guān)鍵點信息，并據(jù)此得到人臉的五官位置；

采用口罩生成模型對人臉下半部分使用口罩進(jìn)行覆蓋，得到戴口罩的人臉底庫圖；

再基于戴口罩專用識別模型進(jìn)行特征提取，得到戴口罩的人臉底庫，即每張戴口罩的人臉底庫圖對應(yīng)的特征信息。

優(yōu)選地，二分類器為基于SVM支持向量機(jī)的人臉檢測二分類器。

優(yōu)選地，所述已經(jīng)訓(xùn)練好的人臉識別模型包括基于VGG網(wǎng)絡(luò)、R-CNN網(wǎng)絡(luò)或者ResNet網(wǎng)絡(luò)訓(xùn)練的人臉識別模型或者CENTER-NET獨立檢測模型。

優(yōu)選地，所述已經(jīng)訓(xùn)練好的人臉識別模型包括MTCNN人臉檢測模型或者SSD_MobileNet人臉檢測模型。

根據(jù)本發(fā)明目的的第二方面還提出一種人臉識別系統(tǒng)，包括：

用于基于佩戴口罩的人臉數(shù)據(jù)集，微調(diào)(Fine-Tune)已經(jīng)訓(xùn)練好的人臉識別模型獲得用于針對佩戴口罩人臉識別的戴口罩專用識別模型的模塊，所述人臉識別模型為基于未佩戴口罩的人臉數(shù)據(jù)集而訓(xùn)練得到；