[發(fā)明專利]用于生成視頻的方法和裝置有效
| 申請?zhí)枺?/td> | 202010256117.1 | 申請日： | 2020-04-02 |
| 公開（公告）號： | CN111476871B | 公開（公告）日： | 2023-10-03 |
| 發(fā)明（設(shè)計）人： | 劉云峰;王超;李遠杭;贠挺;陳國慶 | 申請（專利權(quán)）人： | 百度在線網(wǎng)絡(luò)技術(shù)（北京）有限公司 |
| 主分類號： | G06T13/80 | 分類號： | G06T13/80;G06V40/16 |
| 代理公司： | 北京英賽嘉華知識產(chǎn)權(quán)代理有限責(zé)任公司 11204 | 代理人： | 王達佐;馬曉亞 |
| 地址： | 100085 北京市*** | 國省代碼： | 北京;11 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 用于 生成 視頻 方法 裝置 | ||
1.一種用于生成視頻的方法，包括：
從所接收的動漫風(fēng)格視頻中獲取目標(biāo)動漫人物的動漫人臉圖像序列，以及基于所述動漫人臉圖像序列生成動漫人臉輪廓圖序列；
基于所述動漫人臉輪廓圖序列和所接收的真實人臉的初始人臉圖像，生成針對所述真實人臉的人臉圖像序列，其中，所述人臉圖像序列中的人臉表情與所述動漫人臉圖像序列中的人臉表情相匹配；
根據(jù)所述人臉圖像序列，生成針對所述真實人臉的動漫風(fēng)格圖像序列；
使用所述動漫風(fēng)格人臉圖像序列中的動漫風(fēng)格人臉圖像，替換所述動漫風(fēng)格視頻中所述目標(biāo)動漫人物的人臉圖像，生成所述真實人臉對應(yīng)的動漫風(fēng)格的視頻。
2.根據(jù)權(quán)利要求1所述的方法，其中，所述基于所述動漫人臉輪廓圖序列和所接收的真實人臉的初始人臉圖像，生成針對所述真實人臉的人臉圖像序列，包括：
對于所述動漫人臉輪廓圖序列中的動漫人臉輪廓圖依次執(zhí)行以下人臉圖像生成步驟：基于當(dāng)前動漫人臉輪廓圖和所述初始人臉圖像的人臉特征信息，生成第一人臉圖像；基于所述第一人臉圖像，確定針對所述真實人臉的人臉圖像；
使用所確定的人臉圖像，生成針對所述真實人臉的人臉圖像序列。
3.根據(jù)權(quán)利要求2所述的方法，其中，所述基于所述第一人臉圖像，確定針對所述真實人臉的人臉圖像，包括：
基于當(dāng)前最后確定的至少兩張人臉圖像，生成光流圖；
基于當(dāng)前最后確定的人臉圖像和所述光流圖，生成第二人臉圖像；
基于所述第一人臉圖像和所述第二人臉圖像，生成針對所述真實人臉的人臉圖像。
4.根據(jù)權(quán)利要求1所述的方法，其中，所述基于所述動漫人臉圖像序列生成動漫人臉輪廓圖序列，包括：
對于所述動漫人臉圖像序列中的動漫人臉圖像，對該動漫人臉圖像進行人臉關(guān)鍵點檢測，以及基于檢測到的人臉關(guān)鍵點生成動漫人臉輪廓圖。
5.根據(jù)權(quán)利要求1所述的方法，其中，所述根據(jù)所述人臉圖像序列，生成針對所述真實人臉的動漫風(fēng)格圖像序列，包括：
將所述人臉圖像序列中的人臉圖像輸入預(yù)先建立的動漫風(fēng)格圖像生成模型，生成針對所述真實人臉的動漫風(fēng)格人臉圖像序列，其中，所述動漫風(fēng)格圖像生成模型用于根據(jù)真實人臉的人臉圖像生成動漫風(fēng)格的人臉圖像。
6.一種用于生成視頻的裝置，包括：
獲取單元，被配置成從所接收的動漫風(fēng)格視頻中獲取目標(biāo)動漫人物的動漫人臉圖像序列，以及基于所述動漫人臉圖像序列生成動漫人臉輪廓圖序列；
第一生成單元，被配置成基于所述動漫人臉輪廓圖序列和所接收的真實人臉的初始人臉圖像，生成針對所述真實人臉的人臉圖像序列，其中，所述人臉圖像序列中的人臉表情與所述動漫人臉圖像序列中的人臉表情相匹配；
第二生成單元，被配置成根據(jù)所述人臉圖像序列，生成針對所述真實人臉的動漫風(fēng)格圖像序列；
替換單元，被配置成使用所述動漫風(fēng)格人臉圖像序列中的動漫風(fēng)格人臉圖像，替換所述動漫風(fēng)格視頻中所述目標(biāo)動漫人物的人臉圖像，生成所述真實人臉對應(yīng)的動漫風(fēng)格的視頻。
7.根據(jù)權(quán)利要求6所述的裝置，其中，所述第一生成單元包括：
執(zhí)行子單元，被配置成對于所述動漫人臉輪廓圖序列中的動漫人臉輪廓圖依次執(zhí)行預(yù)設(shè)的人臉圖像生成步驟，其中，所述執(zhí)行子單元包括：圖像生成模塊，被配置成基于當(dāng)前動漫人臉輪廓圖和所述初始人臉圖像的人臉特征信息，生成第一人臉圖像；確定模塊，被配置成基于所述第一人臉圖像，確定針對所述真實人臉的人臉圖像；
序列生成子單元，被配置成使用所確定的人臉圖像，生成針對所述真實人臉的人臉圖像序列。
8.根據(jù)權(quán)利要求7所述的裝置，其中，所述確定模塊進一步被配置成：
基于當(dāng)前最后確定的至少兩張人臉圖像，生成光流圖；
基于當(dāng)前最后確定的人臉圖像和所述光流圖，生成第二人臉圖像；
基于所述第一人臉圖像和所述第二人臉圖像，生成針對所述真實人臉的人臉圖像。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于百度在線網(wǎng)絡(luò)技術(shù)（北京）有限公司，未經(jīng)百度在線網(wǎng)絡(luò)技術(shù)（北京）有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202010256117.1/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
