[發明專利]表情識別方法、裝置和電子設備

在審

• 申請號: 202110126323.5
• 申請日: 2021-01-29
• 公開（公告）號: CN112818838A
• 公開（公告）日: 2021-05-18
• 發明（設計）人: 胡濤
• 申請（專利權）人: 北京嘀嘀無限科技發展有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06N3/08
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 朱穎;黃健

本公開的實施例提供一種表情識別方法、裝置和電子設備，該方法包括：獲取待識別人臉圖像和待識別人臉圖像中目標區域的目標關鍵點信息；將待識別人臉圖像和目標關鍵點信息輸入到目標區域的表情識別模型中，獲取表情識別模型輸出的表情識別結果。本方案中，可以根據檢測需求針對性的獲取人臉圖像中目標區域的目標關鍵點信息，再通過目標區域對應的表情識別模型對目標關鍵點信息進行處理，從而獲得表情識別結果，由于在識別過程中重點關注目標關鍵點信息，而無需將整張待識別人臉圖像作為模型輸入，可以獲得更加準確的表情識別結果。

技術領域

本公開實施例涉及人工智能技術領域，尤其涉及一種表情識別方法、裝置和電子設備。

背景技術

在車輛運行中，如果駕駛員處于疲勞駕駛狀態，容易導致安全事故。因此，可以通過對駕駛員面部中特定部位的表情進行監控，以判斷駕駛員的疲勞程度，從而提高車輛行駛安全。

目前，基于機器視覺技術人臉面部表情挖掘時，均需先通過人臉檢測模型對圖片中的人臉進行定位，獲得待識別的人臉圖像，而后對待識別的人臉圖像進行截取，最后根據特定的業務需求通過人臉表情識別模型，對截取后的待識別的人臉圖像進行特定部位的人臉表情識別，如閉眼、打哈欠等。

然而，上述技術中，在通過人臉表情識別模型對截取的人臉圖像進行特定部位的表情識別時，需要將整張待識別的人臉圖像作為模型輸入，從整張待識別的人臉圖像中識別出特定部位的表情，由于缺乏針對性，會導致對人臉表情識別不準確。

發明內容

本公開的實施例提供一種表情識別方法、裝置和電子設備，用以解決現有技術中人臉表情識別不準確的技術問題。

本公開的實施例提供一種表情識別方法，包括：

獲取待識別人臉圖像和待識別人臉圖像中目標區域的目標關鍵點信息；

將待識別人臉圖像和目標關鍵點信息輸入到目標區域的表情識別模型中，獲取表情識別模型輸出的表情識別結果。

在一種可能的實現方式中，將待識別人臉圖像和關鍵點信息輸入到目標區域的表情識別模型中，包括：

根據目標關鍵點信息生成關鍵點熱力圖，其中，待識別人臉圖像和關鍵點熱力圖的維度相同；

將待識別人臉圖像和關鍵點熱力圖輸入到與目標區域對應的表情識別模型中。

在一種可能的實現方式中，獲取表情識別模型輸出的表情識別結果，包括：

通過表情識別模型獲，取待識別人臉圖像的特征以及關鍵點熱力圖的特征；

通過所述表情識別模型，根據關鍵點熱力圖的特征和待識別人臉圖像的特征，確定感興趣特征；

通過所述表情識別模型，根據感興趣特征，獲得表情識別結果。

在一種可能的實現方式中，根據關鍵點熱力圖的特征和待識別人臉圖像的特征，確定感興趣特征，包括：

根據關鍵點熱力圖中目標關鍵點的特征在關鍵點熱力圖中的位置信息，確定感興趣點在待識別人臉圖像中的位置信息；

根據感興趣特點在待識別人臉圖像中的位置信息，確定感興趣特征。

在一種可能的實現方式中，根據感興趣特征在待識別人臉圖像中的位置信息，確定感興趣特征，包括：

將待識別人臉圖像和關鍵點熱力圖進行通道合并處理，獲得合并處理后的圖像；

根據感興趣點在待識別人臉圖像中的位置信息，從合并處理后的圖像中獲取感興趣特征。在一種可能的實現方式中，獲取待識別人臉圖像和待識別人臉圖像中目標區域的目標關鍵點信息，包括：