[發明專利]面具臉特征識別模型訓練方法和裝置

在審

• 申請號: 202110272296.2
• 申請日: 2021-03-12
• 公開（公告）號: CN113076813A
• 公開（公告）日: 2021-07-06
• 發明（設計）人: 許二赫
• 申請（專利權）人: 首都醫科大學宣武醫院;中國科學院計算技術研究所
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 北京開陽星知識產權代理有限公司 11710
• 代理人: 張通

1.一種面具臉特征識別模型訓練方法，其特征在于，包括：

獲取樣本面部特征視頻以及對應的評價標簽；所述樣本面部特征視頻為用戶按照設定規則執行操作而形成的視頻；

提取所述樣本面部特征視頻的圖像幀而形成幀序列；

按照所述幀序列，對所述幀序列中的相鄰幀進行差分運算，得到差分圖像；

提取各個所述差分圖像的特征矩陣；以及，按照所述幀序列組合各個所述差分圖像的特征矩陣，得到視頻特征矩陣；

采用所述視頻特征矩陣和對應的所述評價標簽，訓練所述面具臉特征識別模型。

2.根據權利要求1所述面具臉特征識別模型訓練方法，其特征在于，

提取所述樣本面部特征視頻的圖像幀而形成幀序列，包括：按照設定規則對所述樣本面部特征視頻進行劃分，得到樣本分視頻；

提取各個所述樣本分視頻的圖像幀而形成對應的幀序列；

按照所述幀序列組合各個所述差分圖像的特征矩陣，得到視頻特征矩陣，包括：按照所述樣本分視頻的排列順序和對應所述幀序列，組合各個所述差分圖像的特征矩陣，得到所述視頻特征矩陣。

3.根據權利要求2所述面具臉特征識別模型訓練方法，其特征在于，所述設定規則包括至少兩個面部動作和各個所述面部動作的執行時間；

按照設定規則對所述樣本面部特征視頻進行劃分，得到樣本分視頻，包括：根據所述面部動作和對應的所述執行時間對所述視頻特征進行劃分，得到所述樣本分視頻。

4.根據權利要求3所述面具臉特征識別模型訓練方法，其特征在于，所述面部動作包括閉上雙眼、放松并直視前方和微笑并露出牙齒。

5.根據權利要求1所述面具臉特征識別模型訓練方法，其特征在于，提取所述樣本面部特征視頻的圖像幀而形成幀序列，包括：

提取所述圖像幀的面部圖像區域；

按照所述圖像幀的排序組合所述面部圖像區域，形成所述幀序列。

6.根據權利要求1-5任一項所述面具臉特征識別模型訓練方法，其特征在于，

所述差分圖像的特征矩陣包括至少兩個特征參數；

按照所述幀序列組合各個所述差分圖像的特征矩陣，得到視頻特征矩陣，包括：

按照所述幀序列提取各個所述特征矩陣的同一特征參數，組合形成同參數向量；

組合所述同參數向量，得到所述視頻特征矩陣。

7.一種面具臉識別方法，其特征在于，包括：

獲取待評價面部特征視頻；所述待評價面部特征視頻為用戶按照設定規則執行操作而形成的視頻；

提取所述待評價面部評價視頻的圖像幀而形成幀序列；

按照所述幀序列，對所述幀序列中的相鄰幀進行差分運算，得到差分圖像；

提取各個所述差分圖像的特征矩陣；以及，按照所述幀序列組合各個所述差分圖像的特征矩陣，得到視頻特征矩陣；

采用如權利要求1-6任一項所述的方法得到的面具臉特征識別模型處理所述視頻特征矩陣，得到面具臉程度評價結果。

8.一種面具臉識別模型訓練裝置，其特征在于，包括：

源數據獲取單元，用于獲取樣本面部特征視頻以及對應的評價標簽；所述樣本面部特征視頻為用戶按照設定規則執行操作而形成的視頻；

幀提取單元，用于提取所述樣本面部特征視頻的圖像幀而形成幀序列；

差分處理單元，用于按照所述幀序列，對所述幀序列中的相鄰幀進行差分運算，得到差分圖像；

特征確定單元，用于提取各個所述差分圖像的特征矩陣；以及，按照所述幀序列組合各個所述差分圖像的特征矩陣，得到視頻特征矩陣；

模型訓練單元，用于采用所述視頻特征矩陣和對應的所述評價標簽，訓練所述面具臉特征識別模型。

9.一種電子設備，其特征在于，包括處理器和存儲器；

所述處理器通過調用所述存儲器存儲的程序或指令，用于執行如權利要求1至6任一項所述面具臉特征識別模型訓練方法的步驟。

10.一種計算機可讀存儲介質，其特征在于，所述計算機可讀存儲介質存儲程序或指令，所述程序或指令使計算機執行如權利要求1至6任一項所述面具臉特征識別模型訓練方法的步驟。