[發明專利]一種面部表情合成方法、裝置及電子設備

有效

• 申請號: 201710640537.8
• 申請日: 2017-07-31
• 公開（公告）號: CN109325988B
• 公開（公告）日: 2022-11-11
• 發明（設計）人: 鄭永森;朱曉龍
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06T11/60
• 分類號: G06T11/60;G06V40/16
• 代理公司: 深圳市深佳知識產權代理事務所(普通合伙) 44285
• 代理人: 王仲凱

1.一種面部表情合成方法，其特征在于，所述方法包括：

獲得目標對象的待處理面部圖像；

識別所述待處理面部圖像的第一面部特征點；

利用所述第一面部特征點，確定所述待處理面部圖像中目標合成區域的第一區域圖像；

對所述第一區域圖像和其他區域圖像進行膚色檢測，得到第一膚色信息和第二膚色信息，所述其他區域圖像為與所述目標合成區域相鄰的區域圖像；

篩選表情素材圖像庫中與所述第一膚色信息和所述第二膚色信息匹配的目標表情素材圖像；

提取所述目標表情素材圖像中目標合成區域對應的區域圖像；

利用所述區域圖像中的像素以及對應的鄰居像素，計算所述區域圖像的像素梯度；

利用泊松算法將所述區域圖像合成到所述待處理面部圖像，并計算得到的合成圖像的像素梯度；

確定所述合成圖像的像素梯度等于所述區域圖像的像素梯度，將所述合成圖像作為所述目標對象的目標面部圖像；

確定所述合成圖像的像素梯度不等于所述區域圖像的像素梯度，調整所述區域圖像中的像素，直至所述合成圖像的像素梯度等于所述區域圖像的像素梯度。

2.根據權利要求1所述的方法，其特征在于，所述提取所述目標表情素材圖像中目標合成區域對應的區域圖像，包括：

識別所述目標表情素材圖像的第二面部特征點；

利用所述第二面部特征點，確定所述目標表情素材圖像中目標合成區域對應的第二區域圖像。

3.根據權利要求2所述的方法，其特征在于，在所述提取所述目標表情素材圖像中目標合成區域對應的區域圖像之前，所述方法還包括：

根據所述待處理面部圖像，對所述目標表情素材圖像進行縮放處理，以使處理后的目標表情素材圖像與所述待處理面部圖像對齊。

4.根據權利要求1所述的方法，其特征在于，所述提取所述目標表情素材圖像中目標合成區域對應的區域圖像，包括：

獲取所述目標表情素材圖像中目標合成區域的面部特征點相應的多邊形圖形，所述多邊形圖形的端點為所述目標合成區域的面部特征點；

提取所述多邊形圖形對應的圖像，作為用于與待處理面部表情合成的區域圖像。

5.一種面部表情合成裝置，其特征在于，所述裝置包括：

圖像獲得模塊，用于獲得目標對象的待處理面部圖像；

圖像處理模塊，用于識別所述待處理面部圖像的第一面部特征點；利用所述第一面部特征點，確定所述待處理面部圖像中目標合成區域的第一區域圖像；對所述第一區域圖像和其他區域圖像進行膚色檢測，得到第一膚色信息和第二膚色信息，所述其他區域圖像為與所述目標合成區域相鄰的區域圖像；

圖像篩選模塊，用于篩選表情素材圖像庫中與所述第一膚色信息和所述第二膚色信息匹配的目標表情素材圖像；

圖像提取模塊，用于提取所述目標表情素材圖像中目標合成區域對應的區域圖像；

圖像融合模塊，用于利用所述區域圖像中的像素以及對應的鄰居像素，計算所述區域圖像的像素梯度；利用泊松算法將所述區域圖像合成到所述待處理面部圖像，并計算得到的合成圖像的像素梯度；確定所述合成圖像的像素梯度等于所述區域圖像的像素梯度，將所述合成圖像作為所述目標對象的目標面部圖像；確定所述合成圖像的像素梯度不等于所述區域圖像的像素梯度，調整所述區域圖像中的像素，直至所述合成圖像的像素梯度等于所述區域圖像的像素梯度。

6.根據權利要求5所述的裝置，其特征在于，所述圖像提取模塊包括：

第二面部特征點識別單元，用于識別所述目標表情素材圖像的第二面部特征點；

第二區域圖像確定單元，用于利用所述第二面部特征點，確定所述目標表情素材圖像中目標合成區域對應的第二區域圖像。

7.根據權利要求6所述的裝置，其特征在于，所述裝置還包括：

圖像調整模塊，用于根據所述待處理面部圖像，對所述目標表情素材圖像進行縮放處理，以使處理后的目標表情素材圖像與所述待處理面部圖像對齊。

8.一種電子設備，其特征在于，所述電子設備包括：

通信接口；

存儲器，用于存儲實現如權利要求1-4任意一項所述的面部表情合成方法的多個指令；

處理器，用于加載并執行所述多個指令，包括：

獲得目標對象的待處理面部圖像；

識別所述待處理面部圖像的第一面部特征點；

利用所述第一面部特征點，確定所述待處理面部圖像中目標合成區域的第一區域圖像；

對所述第一區域圖像和其他區域圖像進行膚色檢測，得到第一膚色信息和第二膚色信息，所述其他區域圖像為與所述目標合成區域相鄰的區域圖像；

篩選表情素材圖像庫中與所述第一膚色信息和所述第二膚色信息匹配的目標表情素材圖像；

提取所述目標表情素材圖像中目標合成區域對應的區域圖像；

利用所述區域圖像中的像素以及對應的鄰居像素，計算所述區域圖像的像素梯度；

利用泊松算法將所述區域圖像合成到所述待處理面部圖像，并計算得到的合成圖像的像素梯度；

確定所述合成圖像的像素梯度等于所述區域圖像的像素梯度，將所述合成圖像作為所述目標對象的目標面部圖像；

確定所述合成圖像的像素梯度不等于所述區域圖像的像素梯度，調整所述區域圖像中的像素，直至所述合成圖像的像素梯度等于所述區域圖像的像素梯度。