[發明專利]視頻生成方法、裝置、電子設備和可讀存儲介質

在審

• 申請號: 202010168022.4
• 申請日: 2020-03-11
• 公開（公告）號: CN111432234A
• 公開（公告）日: 2020-07-17
• 發明（設計）人: 張宏谞
• 申請（專利權）人: 咪咕互動娛樂有限公司;咪咕文化科技有限公司;中國移動通信集團有限公司
• 主分類號: H04N21/234
• 分類號: H04N21/234;H04N21/44
• 代理公司: 上海晨皓知識產權代理事務所(普通合伙) 31260
• 代理人: 成麗杰

1.一種視頻生成方法，其特征在于，包括：

確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物；

獲取用于將所述第一目標人物替換為所述第二目標人物的替換模型；其中，所述替換模型根據第一特征和第二特征訓練得到；所述第一特征包括從所述第一目標人物的視頻中提取的所述第一目標人物的人像特征和用于表征所述第一目標人物在視頻中的運動表現的表現特征；所述第二特征包括從所述第二目標人物的視頻中提取的所述第二目標人物的人像特征和用于表征第二目標人物在視頻中的運動表現的表現特征；

根據所述替換模型，至少將所述待處理視頻中的第一目標人物的人像特征以及表現特征替換為所述第二目標人物的人像特征以及表現特征，并生成替換后的模擬視頻。

2.根據權利要求1所述的視頻生成方法，其特征在于，所述確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物，包括：

獲取針對所述待處理視頻的指定操作；

根據所述指定操作，確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物。

3.根據權利要求2中所述的視頻生成方法，其特征在于，所述指定操作為對終端上的指定按鍵的點擊操作；

所述根據所述指定操作，確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物，包括：

在監控到所述點擊操作后，對預設的候選目標人物和所述待處理視頻中的人物進行展示；

分別根據用戶對展示的候選目標人物的選取結果，以及對展示的所述待處理視頻中的人物的選取結果，確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物。

4.根據權利要求2所述的視頻生成方法，其特征在于，所述指定操作為語音信息中包含指定關鍵詞的語音操作；

所述根據所述指定操作，確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物，包括：

在監控到語音信息中包含指定關鍵詞的語音操作后，確定監控到的語音操作的語音信息中是否包括預設候選人物；

若確定監控到的語音操作的語音信息中包括所述預設候選人物，則根據所述預設候選人物確定待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物；

若確定監控到的語音操作的語音信息中不包括所述預設候選人物，則請求用戶反饋所述待處理視頻中被替換的第一目標人物和替換所述第一目標人物的第二目標人物。

5.根據權利要求1所述的視頻生成方法，其特征在于，所述根據所述替換模型，至少將所述待處理視頻中的第一目標人物的人像特征以及表現特征替換為所述第二目標人物的人像特征以及表現特征，并生成替換后的模擬視頻，包括：

對所述待處理視頻中包括所述第一目標人物的視頻片段進行裁剪，得到包括所述第一目標人物的視頻片段的第一剪裁視頻片段；

將所述第一剪裁視頻片段輸入所述替換模型，至少將所述第一剪裁視頻片段中的第一目標人物的人像特征以及表現特征替換為所述第二目標人物的人像特征以及表現特征，得到用于替換所述第一剪裁視頻片段的第二剪裁視頻片段；

將所述待處理視頻中的所述第一剪裁視頻片段替換為所述第二剪裁視頻片段，并生成替換后的模擬視頻。

6.根據權利要求1所述的視頻生成方法，其特征在于，在所述生成替換后的模擬視頻之后，所述方法還包括：

根據同一時間戳，對所述待處理視頻和所述模擬視頻進行同步播放。

7.根據權利要求6所述的視頻生成方法，其特征在于，所述根據同一時間戳，對所述待處理視頻和所述模擬視頻進行同步播放，包括：

在同一時間戳下對所述模擬視頻和所述待處理視頻中的指定內容進行監控；

將監控到所述指定內容的視頻確定為主顯視頻，并將未監控到所述指定內容的視頻確定為輔顯視頻；

根據所述主顯視頻和所述輔顯視頻的預設顯示方式，對所述待處理視頻和所述模擬視頻進行同步播放；其中，所述預設顯示方式至少包括：以預設的顯示面積進行顯示，所述主顯視頻的顯示面積大于所述輔顯視頻的顯示面積。