[發明專利]人臉圖像處理方法、裝置和電子設備

在審

• 申請號: 202110475720.3
• 申請日: 2017-08-09
• 公開（公告）號: CN113205040A
• 公開（公告）日: 2021-08-03
• 發明（設計）人: 錢晨;王權;王飛
• 申請（專利權）人: 北京市商湯科技開發有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00;G06K9/62;G06N3/04
• 代理公司: 北京中知恒瑞知識產權代理事務所(普通合伙) 11889
• 代理人: 吳迪

1.一種人臉圖像處理方法，其特征在于，包括：

對待處理圖像進行人臉切割處理，得到人臉的至少一個器官圖像塊；

將所述至少一個器官圖像塊分別輸入到對應的第一神經網絡，得到所述第一神經網絡分別提取的對應器官的多個關鍵點信息；其中，至少兩個不同類別的器官分別對應不同的第一神經網絡；

基于所述至少一個器官分別對應的多個關鍵點信息，確定所述至少一個器官分別對應的軌跡信息或擬合線信息。

2.根據權利要求1所述的方法，其特征在于，基于所述至少一個器官分別對應的多個關鍵點信息，確定所述至少一個器官分別對應的軌跡信息或擬合線信息，包括：

在所述至少一個器官包括眼睛的情況下，基于所述眼睛對應的多個關鍵點信息，確定用于描述眼睛形狀的眼瞼線信息；

在所述至少一個器官包括嘴唇的情況下，基于所述嘴唇對應的多個關鍵點信息，確定用于描述嘴唇形狀的嘴唇線信息。

3.根據權利要求2所述的方法，其特征在于，基于所述眼睛對應的多個關鍵點信息，確定用于描述眼睛形狀的眼瞼線信息，包括：

基于單眼上眼瞼或下眼瞼處的10-15個關鍵點，確定用于描述眼睛形狀的眼瞼線信息。

4.根據權利要求2所述的方法，其特征在于，基于所述嘴唇對應的多個關鍵點信息，確定用于描述嘴唇形狀的嘴唇線信息，包括：

基于單唇上下輪廓處各自的16-21個關鍵點，確定用于描述嘴唇形狀的嘴唇線信息。

5.根據權利要求1至4任一所述的方法，其特征在于，對待處理圖像進行人臉切割處理，得到人臉的至少一個器官圖像塊，包括：

獲取待處理圖像的初始人臉關鍵點信息；所述初始人臉關鍵點信息中的至少部分關鍵點表征器官的輪廓；

根據所述初始人臉關鍵點信息對待處理圖像進行人臉切割處理，得到人臉的至少一個器官圖像塊。

6.根據權利要求5所述的方法，其特征在于，所述方法還包括：

整合所述初始人臉關鍵點信息和所述各相應器官的關鍵點信息，獲得所述待處理圖像的人臉關鍵點信息；所述人臉關鍵點信息中的關鍵點數量大于所述初始人臉關鍵點信息和所述各相應器官的關鍵點信息中任一者的關鍵點數量。

7.根據權利要求5或6所述的方法，其特征在于，所述獲取所述待處理圖像的初始人臉關鍵點信息，包括：

將所述待處理圖像輸入第二神經網絡；

經所述第二神經網絡提取所述待處理圖像的人臉關鍵點信息，得到所述初始人臉關鍵點信息。

8.一種人臉圖像處理裝置，其特征在于，包括：

切割模塊，用于對待處理圖像進行人臉切割處理，得到人臉的至少一個器官圖像塊；

輸入模塊，用于將所述至少一個器官圖像塊分別輸入到對應的第一神經網絡，得到所述第一神經網絡分別提取的對應器官的多個關鍵點信息；其中，至少兩個不同類別的器官分別對應不同的第一神經網絡；

提取器官關鍵點模塊，用于基于所述至少一個器官分別對應的多個關鍵點信息，確定所述至少一個器官分別對應的軌跡信息或擬合線信息。

9.一種電子設備，其特征在于，包括：處理器、存儲器和總線，所述存儲器存儲有所述處理器可執行的機器可讀指令，當電子設備運行時，所述處理器與所述存儲器之間通過總線通信，所述機器可讀指令被所述處理器執行時執行如權利要求1至7任一所述的方法。

10.一種計算機可讀存儲介質，其上存儲有計算機程序，該計算機程序被處理器執行時實現上述權利要求1-7中任一項所述的方法。