[發明專利]臉部變換方法、裝置、設備、存儲介質以及產品

有效

• 申請號: 202110944348.6
• 申請日: 2021-08-17
• 公開（公告）號: CN113658035B
• 公開（公告）日: 2023-08-08
• 發明（設計）人: 顏劍鋒
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06T3/00
• 分類號: G06T3/00
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 宋興;黃健

1.一種臉部變換方法，包括：

確定源臉部圖像以及目標臉部圖像；

將所述目標臉部圖像中的面部器官替換為所述源臉部圖像中的面部器官，獲得面部器官圖像；

將所述源臉部圖像以及所述目標臉部圖像劃分為至少一個圖像組；其中，任一個圖像組包含源臉部圖像的第一區域圖像以及目標臉部圖像的第二區域圖像；所述第一區域圖像與所述第二區域圖像的臉部區域位置相同；

針對任一個圖像組，確定所述圖像組中第一區域圖像對應三角區域的第一子關鍵點以及所述圖像組中第二區域圖像對應三角區域的第二子關鍵點；

計算所述第一子關鍵點與所述第二子關鍵點的位置距離矩陣；

利用所述位置距離矩陣，將所述第一區域圖像中多個第一像素點各自的像素位置映射為多個映射位置；

計算多個映射位置與所述第二區域圖像多個第二像素點各自的像素位置之間的位置差值，獲得所述圖像組對應的像素點距離，以獲得所述至少一個圖像組分別對應的像素點距離；

將所述至少一個圖像組各自的像素點距離按照各自的臉部區域位置進行距離融合，獲得臉型距離信息；

根據所述臉型距離信息，對所述面部器官圖像中的臉型按照所述源臉部圖像的臉型進行調整處理，獲得目標換臉圖像。

2.根據權利要求1所述的方法，其中，所述將所述源臉部圖像以及所述目標臉部圖像劃分為至少一個圖像組，包括：

提取所述源臉部圖像中臉部區域對應第一關鍵點以及所述目標臉部圖像中臉部區域對應第二關鍵點；

基于所述第一關鍵點以及所述第二關鍵點分別進行三角網絡生成，獲得所述第一關鍵點對應的第一三角網絡以及所述第二關鍵點對應的第二三角網絡；

將所述源臉部圖像按照所述第一三角網絡劃分為至少一個第一區域圖像；

將所述目標臉部圖像按照所述第二三角網絡劃分為至少一個第二區域圖像；

根據所述第一三角網絡以及所述第二三角網絡的網格對應關系，將所述至少一個第一區域圖像以及所述至少一個第二區域圖像劃分為所述至少一個圖像組。

3.根據權利要求1或2所述的方法，還包括：

確定所述目標臉部圖像中的臉部區域信息以及面部器官區域信息；

根據所述臉部區域信息以及所述面部器官區域信息，生成所述目標臉部圖像的目標掩碼圖像；

所述根據所述臉型距離信息，對所述面部器官圖像中的臉型按照所述源臉部圖像的臉型進行調整處理，獲得目標換臉圖像，包括：

基于所述臉型距離信息以及所述目標掩碼圖像，對所述面部器官圖像的臉型按照所述源臉部圖像的臉型進行處理，獲得所述目標換臉圖像。

4.根據權利要求3所述的方法，其中，所述基于所述臉型距離信息以及所述目標掩碼圖像，對所述面部器官圖像中的臉型按照所述源臉部圖像的臉型進行處理，獲得所述目標換臉圖像，包括：

基于所述目標掩碼圖像對所述面部器官圖像進行臉型校準計算，獲得中間圖像；

利用所述臉型距離信息對所述中間圖像進行仿射變換計算，獲得所述目標換臉圖像。

5.根據權利要求1-2、4任一項所述的方法，其中，所述將所述目標臉部圖像中的面部器官替換為所述源臉部圖像中的面部器官，獲得面部器官圖像，包括：

基于預設多個特征提取器，提取所述源臉部圖像的多個圖像特征信息；其中，所述多個特征提取器的提取方式不同；

基于預設屬性提取器，提取所述目標臉部圖像的圖像屬性信息；

將所述多個圖像特征信息和所述圖像屬性信息同時輸入換臉模型，以將所述目標臉部圖像中的面部器官替換為所述源臉部圖像的面部器官，獲得所述面部器官圖像。

6.根據權利要求1~2、4任一項所述的方法，其中，所述確定源臉部圖像以及目標臉部圖像包括：

獲取待替換的初始源圖像以及初始目標圖像；

提取所述初始源圖像的臉部區域對應第一臉部圖像以及所述初始目標圖像的臉部區域對應第二臉部圖像；

對所述第一臉部圖像進行臉部姿態校正，獲得所述初始源圖像對應的源臉部圖像；

對所述第二臉部圖像進行臉部姿態校正，獲得所述初始目標圖像對應的目標臉部圖像。