[發明專利]一種多角度側面人臉矯正方法、裝置、計算機設備和介質

在審

• 申請號: 202210054981.2
• 申請日: 2022-01-18
• 公開（公告）號: CN114399824A
• 公開（公告）日: 2022-04-26
• 發明（設計）人: 謝劍斌;高峰
• 申請（專利權）人: 湖南中科助英智能科技研究院有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06K9/62;G06V10/774
• 代理公司: 長沙國科天河知識產權代理有限公司 43225
• 代理人: 李楊

本申請涉及一種多角度側面人臉矯正方法、裝置、計算機設備和存儲介質。所述方法包括：通過公開數據集作為訓練集，對多角度側面人臉圖像進行預處理，得到側面局部圖和縮放后的側面全局圖，將側面局部圖和側面全局圖輸入到生成器網絡中，其中，生成器網絡中包括局部網絡和全局網絡，通過局部網絡將側面局部矯正為正面局部，并通過加入包含注意力機制的輪廓網絡提取邊緣輪廓信息，再由全局網絡得到全局細節信息，將局部網絡和全局網絡的數據融合，得到生成器輸出的矯正還原圖，結合判別器，通過訓練集進行網絡的訓練，將訓練好的生成器網絡用于多角度側面人臉的矯正。本發明提高了多角度側面人臉的矯正效果，幫助準確識別人員身份。

技術領域

本申請涉及計算機技術領域，特別是涉及一種多角度側面人臉矯正方法、裝置、計算機設備和存儲介質。

背景技術

人臉識別技術發展迅速，應用于社會生活各個領域。對于監控視頻等現實場景中非正面姿態的人臉，人臉識別效果不理想，尤其是同時存在偏轉角和俯仰角的側面人臉的生成正面關注較少，多角度側臉生成的正面人臉圖存在信息保留不全、矯正效果不佳等問題。

發明內容

基于此，有必要針對上述技術問題，提供一種能夠提高多角度側臉矯正效果的多角度側面人臉矯正方法、裝置、計算機設備和存儲介質。

一種多角度側面人臉矯正方法，所述方法包括：

獲取人臉矯正的訓練數據集，將所述訓練數據集中的多角度側面人臉圖像進行預處理，得到側面局部圖和縮放后的側面全局圖；

將所述側面局部圖和所述側面全局圖輸入到生成器網絡中；所述生成器網絡包括局部網絡和全局網絡；所述局部網絡包括第一局部網絡和第二局部網絡；所述第一局部網絡用于對所述側面局部圖進行矯正還原，得到正面局部圖；所述第二局部網絡在每層卷積后添加了注意力加權調整通道，通過所述第二局部網絡根據所述側面局部圖提取邊緣輪廓信息；所述全局網絡用于根據所述側面全局圖得到全局細節信息，并根據所述正面局部圖、所述邊緣輪廓信息和所述全局細節信息，得到還原矯正全局圖；

將所述還原矯正全局圖和所述訓練數據集中對應的真實全局圖輸入到判別器網絡中，通過所述判別器網絡分別得到所述還原矯正全局圖和所述真實全局圖的預測概率圖；

根據預設的損失函數、所述還原矯正全局圖和所述真實全局圖的預測概率圖對所述生成器網絡和所述判別器網絡進行訓練直至收斂，得到訓練好的生成器網絡；

將待矯正的多角度側面人臉圖輸入所述訓練好的生成器網絡中，得到多角度側面人臉矯正圖。

在其中一個實施例中，還包括：獲取人臉矯正的訓練數據集；

通過訓練完成的深度學習網絡模型對所述訓練數據集中的多角度側面人臉圖像進行特征點估計；

根據左眼、右眼和嘴部的特征點位置坐標，計算得到人臉的旋轉角度；

根據所述旋轉角度將人臉以雙眼為基準旋轉至水平位置；

根據旋轉后的圖像上眼睛、鼻部和嘴部的特征點位置，裁剪得到側面局部圖；

將所述多角度側面人臉圖像按照預設大小進行縮放，得到縮放后的側面全局圖。

在其中一個實施例中，還包括：根據特征點位置提取側面面部數據；所述側面面部數據包括側面眼睛數據、側面鼻部數據、側面嘴部數據和側面輪廓數據；

通過所述第一局部網絡根據所述側面面部數據與訓練數據集中的正面面部數據進行像素比對，由網絡自學習的方式對所述側面局部圖進行矯正還原，得到正面局部圖；所述正面局部圖包括正面眼睛圖、正面鼻部圖和正面嘴部圖。

在其中一個實施例中，還包括：將所述側面輪廓數據輸入所述第二局部網絡；