[發明專利]用于處理人物形象數據的方法和裝置

在審

• 申請號: 202010962811.5
• 申請日: 2020-09-14
• 公開（公告）號: CN112053315A
• 公開（公告）日: 2020-12-08
• 發明（設計）人: 胡天舒;馬明明;何聲一;郭漢奇;李彤輝;洪智濱
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T3/40
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

1.一種用于處理人物形象數據的方法，所述方法包括：

獲取第一人物的人物形象視頻，作為第一數據，并獲取第二人物的人物形象視頻，作為第二數據，其中，所述人物形象視頻中具有包括頭像動態形象的動態形象，所述第一人物的人物形象視頻中具有多種動態形象；

提取所述第一數據中所述第一人物的頭像和所述第二數據中所述第二人物的頭像；

利用頭像更換模型，以所述第二人物的頭像更換所述第一人物的頭像，得到更換后頭像，其中，所述更換后頭像具有所述第一人物的頭像動態形象和所述第二人物的頭像屬性形象。

2.根據權利要求1所述的方法，其中，所述第一人物的人物形象視頻的時長大于所述第二人物的人物形象視頻的時長，所述第一數據中的多種動態形象包括創建虛擬形象所需的多種必要動態形象，對于所述多種必要動態形象中的至少一種中的每一種，所述第二數據缺少該種必要動態形象所包含的多個必要動態形象中的至少一個。

3.根據權利要求2所述的方法，其中，所述第一數據中的頭像動態形象包括唇形和表情，所述第二數據中的頭像動態形象包括唇形和/或表情；

所述方法還包括：

基于所述更換后頭像，創建虛擬形象，其中，所述虛擬形象具有所述第一人物的頭像動態形象以及所述第二人物的頭像屬性形象。

4.根據權利要求3所述的方法，其中，所述第一數據中的多種動態形象還包括身體動態形象，所述身體動態形象包括身體動作；

所述基于所述更換后頭像，創建虛擬形象，包括：

將所述更換后頭像和所述第一數據進行結合處理，以使結合處理后的第一數據中的頭像為所述更換后頭像；

利用所述結合處理后的第一數據，創建虛擬形象，其中，所述虛擬形象具有所述第一人物的頭像動態形象、身體動態形象和身體屬性形象，以及所述第二人物的頭像屬性形象。

5.根據權利要求1所述的方法，其中，所述頭像更換模型通過以下步驟訓練得到：

基于所述第一數據中所述第一人物的頭像和所述第二數據中所述第二人物的頭像，對初始頭像更換模型進行訓練，得到訓練后的頭像更換模型。

6.根據權利要求4所述的方法，其中，所述初始頭像更換模型包括編碼器和解碼器，所述解碼器的數量為兩個；

所述基于所述第一數據中所述第一人物的頭像和所述第二數據中所述第二人物的頭像，對初始頭像更換模型進行訓練，包括：

基于所述第一數據中所述第一人物的頭像和所述第二數據中所述第二人物的頭像對所述編碼器和兩個所述解碼器進行訓練，以使其中一個解碼器所生成的頭像具有第二人物的頭像屬性形象。

7.根據權利要求1所述的方法，其中，所述提取所述第一數據中所述第一人物的頭像和所述第二數據中所述第二人物的頭像，包括：

對所述第一數據和所述第二數據定位頭像的關鍵點，并基于所述關鍵點對所述第一數據中和所述第二數據進行頭像的對齊；

對于所述第一數據的對齊結果進行圖像分割，以提取到所述第一數據中所述第一人物的頭像，對于所述第二數據的對齊結果進行圖像分割，以提取到所述第二數據中所述第二人物的頭像。

8.一種用于處理人物形象數據的裝置，所述裝置包括：

獲取單元，被配置成獲取第一人物的人物形象視頻，作為第一數據，并獲取第二人物的人物形象視頻，作為第二數據，其中，所述人物形象視頻中具有包括頭像動態形象的動態形象，所述第一人物的人物形象視頻中具有多種動態形象；

提取單元，被配置成提取所述第一數據中所述第一人物的頭像和所述第二數據中所述第二人物的頭像；

更換單元，被配置成利用頭像更換模型，以所述第二人物的頭像更換所述第一人物的頭像，得到更換后頭像，其中，所述更換后頭像具有所述第一人物的頭像動態形象和所述第二人物的頭像屬性形象。