[發明專利]一種臉部圖像豐富度特征的檢測方法及設備

有效

• 申請號: 201910872851.8
• 申請日: 2019-09-16
• 公開（公告）號: CN110728193B
• 公開（公告）日: 2022-10-04
• 發明（設計）人: 徐偉;羅琨;陳曉磊
• 申請（專利權）人: 連尚（新昌）網絡科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/80
• 代理公司: 上海百一領御專利代理事務所(普通合伙) 31243
• 代理人: 王奎宇;甘章乖

1.一種臉部圖像豐富度特征的檢測方法，其中，

所述方法包括：

獲取至少一個臉部樣本圖像；

對所述至少一個臉部樣本圖像進行人臉檢測，得到所述至少一個臉部樣本圖像中各圖像的待檢測區域；

對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部特征提取得到所述至少一個臉部樣本圖像中各圖像的臉部特征信息；

對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部表情識別得到所述至少一個臉部樣本圖像中各圖像的臉部表情信息；

對所述至少一個臉部樣本圖像中各圖像的臉部特征信息和臉部表情信息進行特征融合，得到所述至少一個臉部樣本圖像的豐富度特征，其中，所述臉部樣本圖像的豐富度特征用來評價用于訓練臉部圖像替換模型的樣本臉部圖像的樣本質量，使得訓練得到的臉部圖像替換模型能夠有效貼合用于替換的目標臉部圖像的各種面部姿態及表情。

2.根據權利要求1所述的方法，其中，

所述臉部特征信息包括臉部特征點信息和臉部角度信息，其中，

所述對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部特征提取得到所述至少一個臉部樣本圖像中各圖像的臉部特征信息，包括：

對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部特征點提取，得到所述至少一個臉部樣本圖像中各圖像的臉部特征點信息；

對所述至少一個臉部樣本圖像中各圖像的臉部特征點信息進行臉部角度識別，得到所述至少一個臉部樣本圖像中各圖像的臉部角度信息；

其中，所述對所述至少一個臉部樣本圖像中各圖像的臉部特征信息和臉部表情信息進行特征融合，得到所述至少一個臉部樣本圖像的豐富度特征，包括：

對所述至少一個臉部樣本圖像中各圖像的臉部特征點信息、臉部角度信息和臉部表情信息進行特征融合，得到所述至少一個臉部樣本圖像的豐富度特征。

3.根據權利要求2所述的方法，其中，

所述對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部特征點提取，得到所述至少一個臉部樣本圖像中各圖像的臉部特征點信息，包括：

獲取用于檢測臉部特征的關鍵點定位模型，其中，所述關鍵點定位模型由局部二值化特征算法和隨機森林算法訓練得到；

通過所述關鍵點定位模型，對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部特征點提取，得到所述至少一個臉部樣本圖像中各圖像的臉部特征點信息。

4.根據權利要求3所述的方法，其中，

所述對所述至少一個臉部樣本圖像中各圖像的臉部特征點信息進行臉部角度識別，得到所述至少一個臉部樣本圖像中各圖像的臉部角度信息，包括：

獲取用于識別臉部角度的臉部角度識別模型；

通過所述臉部角度識別模型，對所述至少一個臉部樣本圖像中各圖像的臉部特征點信息進行臉部角度識別，得到所述至少一個臉部樣本圖像中各圖像的臉部角度信息。

5.根據權利要求1所述的方法，其中，

所述對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部表情識別得到所述至少一個臉部樣本圖像中各圖像的臉部表情信息，包括：

獲取用于識別臉部表情的臉部表情識別模型，其中，所述臉部表情識別模型由基于深度學習的卷積神經網絡訓練得到；

通過所述臉部表情識別模型，對所述至少一個臉部樣本圖像中各圖像的待檢測區域進行臉部表情識別得到所述至少一個臉部樣本圖像中各圖像的的臉部表情信息。

6.根據權利要求1所述的方法，其中，

所述對所述至少一個臉部樣本圖像中各圖像的臉部特征信息和臉部表情信息進行特征融合，得到所述至少一個臉部樣本圖像的豐富度特征，包括：

對所述至少一個臉部樣本圖像中各圖像的臉部特征信息和臉部表情信息進行融合，得到所述至少一個臉部樣本圖像中各圖像的豐富度特征；

根據所述至少一個臉部樣本圖像中各圖像的豐富度特征，得到所述至少一個臉部樣本圖像的豐富度特征。