[發明專利]一種人臉關鍵點檢測方法、裝置、電子設備及存儲介質

有效

• 申請號: 202011353305.2
• 申請日: 2020-11-26
• 公開（公告）號: CN112464809B
• 公開（公告）日: 2023-06-06
• 發明（設計）人: 朱子魁
• 申請（專利權）人: 北京奇藝世紀科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/774;G06V10/80
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 孫翠賢;馬敬

本發明實施例提供了一種人臉關鍵點檢測方法、裝置、電子設備及存儲介質，應用于圖像處理技術領域，該檢測方法包括：獲取待檢測人臉關鍵點的目標圖像；將目標圖像輸入至預設的關鍵點檢測模型，以使關鍵點檢測模型提取目標圖像的第一類特征圖和第二類特征圖，融合第一類特征圖和第二類特征圖，并基于融合后的特征圖，確定目標圖像中各個人臉關鍵點的坐標信息所述關鍵點檢測模型訓練過程中，每次調整模型參數時基于各個目標坐標的預測坐標值與相應真實坐標值的差異進行調整，所述各個目標坐標為各個人臉關鍵點的橫坐標和縱坐標中、未滿足預定收斂條件的坐標。可以解決人臉關鍵點檢測的準確度不高。

技術領域

本發明涉及圖像處理技術領域，特別是涉及一種人臉關鍵點檢測方法、裝置、電子設備及存儲介質。

背景技術

人臉關鍵點檢測是人臉識別中重要的基礎環節。

現有技術中，在識別人臉關鍵點時，將待進行人臉關鍵點檢測的目標圖像輸入至關鍵點檢測模型中，通過關鍵點檢測模型中的多層子網絡結構的處理，最終得到人臉關鍵點的檢測結果。

發明人在實現本發明的過程中發現，現有技術至少存在如下問題：

現有技術中，關鍵點檢測網絡的訓練過程中存在模型過擬合的問題，導致模型精度受到影響，從而導致人臉關鍵點檢測的準確度不高。

發明內容

本發明實施例的目的在于提供一種人臉關鍵點檢測方法、裝置、電子設備及存儲介質，以解決人臉關鍵點檢測的準確度不高的技術問題。具體技術方案如下：

在本發明實施的第一方面，首先提供了一種人臉關鍵點檢測方法，應用于電子設備，所述方法包括：

獲取待檢測人臉關鍵點的目標圖像；

將所述目標圖像輸入至預設的關鍵點檢測模型，以使所述關鍵點檢測模型提取所述目標圖像的第一類特征圖和第二類特征圖，融合所述第一類特征圖和第二類特征圖，并基于融合后的特征圖，確定所述目標圖像中各個人臉關鍵點的坐標信息；所述第一類特征圖為含有語義信息的特征圖，所述第二類特征圖為含有像素點的位置信息的特征圖；

其中，所述關鍵點檢測模型是基于樣本圖像，以及所述樣本圖像中各個人臉關鍵點的真實坐標信息，訓練得到的模型；

所述關鍵點檢測模型訓練過程中，每次調整模型參數時基于各個目標坐標的預測坐標值與相應真實坐標值的差異進行調整，所述各個目標坐標為各個人臉關鍵點的橫坐標和縱坐標中、未滿足預定收斂條件的坐標。

可選地，所述關鍵點檢測模型的訓練過程包括：

將所述樣本圖像輸入至所述關鍵點檢測模型，以使所述關鍵點檢測模型提取所述樣本圖像的第一類特征圖和第二類特征圖，融合所述第一類特征圖和第二類特征圖，并基于融合后的特征圖，確定所述樣本圖像中各個人臉關鍵點的坐標信息；

基于所述樣本圖像中的各個人臉關鍵點的真實坐標信息和預測坐標信息，從各個人臉關鍵點的橫坐標和縱坐標中，確定未滿足預定收斂條件的各個目標坐標；

利用各個目標坐標的預測坐標值和相應真實坐標值的差異，調整所述關鍵點檢測模型的模型參數；

判斷當前的訓練次數是否達到預設訓練次數，如果是，結束訓練，并基于訓練得到的模型參數，確定用于作為訓練完成的關鍵點檢測模型的模型參數，得到訓練完成的關鍵點檢測模型；否則，返回所述將所述樣本圖像輸入至所述關鍵點檢測模型的步驟。

可選地，所述基于所述樣本圖像中各個人臉關鍵點的真實坐標信息和預測坐標信息，從各個人臉關鍵點的橫坐標和縱坐標中，確定未滿足預定收斂條件的各個目標坐標，包括：

基于所述樣本圖像中各個人臉關鍵點的每種坐標的真實坐標值與預測坐標值的差值，計算目標誤差值；