[發明專利]一種人臉表情識別方法和相關裝置

在審

• 申請號: 202011569124.3
• 申請日: 2020-12-26
• 公開（公告）號: CN112613416A
• 公開（公告）日: 2021-04-06
• 發明（設計）人: 高磊
• 申請（專利權）人: 中國農業銀行股份有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06N3/04;G06N3/08
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 楊麗爽

本申請提供了一種人臉表情識別方法和相關裝置，獲取人臉圖像對應的紋理特征、幾何特征和語義特征，然后分別對紋理特征、幾何特征和語義特征進行編碼，得到紋理特征對應的第一特征、幾何特征對應的第二特征和語義特征對應的第三特征。由于編碼過程是對數據進行有損壓縮，因此，對特征進行編碼相當于對特征中與人臉表情識別無關的數據進行過濾，降低了干擾信息對人臉表情識別的影響。繼而，融合第一特征、第二特征和第三特征，實現了對于人臉圖像三個維度上淺層特征的重構。通過對融合后得到的融合特征進行解碼，進一步發掘了人臉圖像中與人臉表情識別相關的深度信息，從而根據解碼后的第四特征確定人臉圖像對應的人臉表情，提高了人臉表情辨識度。

技術領域

本申請涉及人工智能技術領域，尤其涉及一種人臉表情識別方法和相關裝置。

背景技術

人臉表情識別屬于情感識別的一類，是指對給定的人臉圖像指定一個所屬的情感類別，包括開心、悲傷、恐懼、驚訝、憤怒或厭惡等。

人臉表情識別是計算機視覺領域的重要研究內容，隨著人工智能研究的發展，其在人工交互、網絡監控和虛擬現實等領域展現出廣闊的應用前景。人臉表情是人類內心活動的寫照，如何對人臉表情進行準確的識別，有助于對人的情緒進行準確分析，從而提升人機交互體驗。

然而，相關的人臉表情識別方法抗干擾能力差，易受到環境的影響，例如，光照、遮擋、膚色、臉型等，容易出現表情無法識別或錯誤識別。

發明內容

為了解決上述相關技術存在的技術問題，本申請提供了一種人臉表情識別方法和相關裝置，降低了環境的影響，提高了人臉表情識別的準確度。

一方面，本申請實施例提供了一種人臉表情識別方法，所述方法包括：

獲取人臉圖像對應的紋理特征、幾何特征和語義特征；

對所述紋理特征、所述幾何特征和所述語義特征分別進行編碼，得到所述紋理特征對應的第一特征、所述幾何特征對應的第二特征和所述語義特征對應的第三特征；

融合所述第一特征、所述第二特征和所述第三特征，得到所述人臉圖像對應的融合特征；

對所述融合特征進行解碼，得到所述人臉圖像對應的第四特征；

根據所述第四特征，確定所述人臉圖像對應的人臉表情。

在一種可能的實現方式中，所述對所述紋理特征、所述幾何特征和所述語義特征分別進行編碼，得到所述紋理特征對應的第一特征，所述幾何特征對應的第二特征和所述語義特征對應的第三特征包括：

利用自編碼神經網絡模型中的編碼模塊對所述紋理特征、所述幾何特征和所述語義特征分別進行編碼，得到所述紋理特征對應的第一特征、所述幾何特征對應的第二特征和所述語義特征對應的第三特征；

所述融合第一特征、所述第二特征和所述第三特征，得到所述人臉圖像對應的融合特征包括：

利用所述自編碼神經網絡模型中的融合模塊融合所述第一特征、所述第二特征和所述第三特征，得到所述人臉圖像對應的融合特征；

所述對所述融合特征進行解碼，得到所述人臉圖像對應的第四特征包括：

利用所述自編碼神經網絡模型的解碼模塊對所述融合特征進行解碼，得到所述人臉圖像的第四特征。

在一種可能的實現方式中，所述方法還包括：

獲取待識別的人臉圖像和所述人臉圖像對應的分塊圖像；所述分塊圖像用于標識所述人臉圖像所包括的人臉部位；

根據所述分塊圖像，獲取所述人臉圖像對應的所述紋理特征和所述幾何特征；

根據所述人臉圖像，獲取所述人臉圖像對應的語義特征。