[發明專利]視頻中人臉性別變換方法、裝置、電子設備和存儲介質

有效

• 申請號: 201910918051.5
• 申請日: 2019-09-26
• 公開（公告）號: CN110688948B
• 公開（公告）日: 2022-11-15
• 發明（設計）人: 常元章;姚錕;李世虎;楊少雄;王從語;洪智濱;張演龍;肖月;閆祥達;趙晨;韓鈞宇;馬曉昕;趙輝;劉經拓
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06V40/16
• 分類號: G06V40/16;G06V10/75;G06T3/00
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 王艷斌

1.一種視頻中人臉性別變換方法，其特征在于，包括：

基于人臉識別技術，判斷視頻幀中是否存在人臉，當視頻幀中存在人臉時，基于人臉性別識別技術，識別所述人臉是否為目標人臉；所述目標人臉為與男性特征匹配的人臉或與女性特征匹配的人臉；在確定視頻的第一幀圖像中包含目標人臉時，對所述第一幀圖像進行關鍵點提取，確定所述第一幀圖像對應的關鍵點集；

若參考人臉庫中包含與所述目標人臉匹配的參考人臉，則向圖形處理器發送性別變換指令，所述性別變換指令中包括所述參考人臉對應的性別變換模式、所述第一幀圖像及所述關鍵點集，以使所述圖形處理器依據所述參考人臉對應的性別變換模式，利用所述關鍵點集對所述第一幀圖像中的目標人臉進行性別變換，其中，參考人臉庫中包括已經完成性別變換的人臉圖像及對應的性別變換模式，不同的人臉關鍵區域對應的特征調整處理方式不同，并且，同一人臉關鍵區域在不同的性別變換模式下，對應的特征調整處理方式也不同；

獲取所述圖形處理器返回的性別變換后的第二幀圖像；

所述確定所述第一幀圖像對應的關鍵點集之后，還包括：

若參考人臉庫中未包含與所述目標人臉匹配的參考人臉，則向圖形處理器發送性別變換指令，其中，所述性別變換指令中包括：原性別、目標性別、所述第一幀圖像及所述關鍵點集，以使所述圖形處理器利用所述關鍵點集，對所述目標人臉進行性別變換；

獲取所述圖形處理器返回的性別變換后的第二幀圖像及所述目標人臉對應的性別變換模式；將所述目標人臉及對應的性別變換模式存入所述參考人臉庫中；

獲取所述圖形處理器返回的目標人臉及對應的三角剖分模式；將所述目標人臉及對應的三角剖分模式存入所述參考人臉庫中。

2.如權利要求1所述的方法，其特征在于，若參考人臉庫中包含與所述目標人臉匹配的參考人臉；

所述性別變換指令中，還包括所述參考人臉對應的三角剖分模式。

3.如權利要求1-2任一所述的方法，其特征在于，所述確定視頻的第一幀圖像中包含目標人臉之前，還包括：

獲取人臉圖像性別變換請求，所述變換請求中包括原性別及目標性別；

所述確定視頻的第一幀圖像中包含目標人臉，包括：

對視頻中的第一幀圖像進行人臉識別，確定所述第一幀圖像中包含的與所述原性別特征匹配的目標人臉。

4.一種視頻中人臉性別變換方法，其特征在于，包括：

獲取中央處理器發送的性別變換指令，其中，所述性別變換指令中包括第一幀圖像及對應的關鍵點集；

若所述性別變換指令中包括三角剖分模式，則依據所述三角剖分模式，根據所述關鍵點集將所述第一幀圖像進行三角剖分，確定所述第一幀圖像中的各人臉關鍵區域；

根據所述性別變換指令中的目標性別變換模式，將各人臉關鍵區域進行特征調整處理，以生成人臉性別變換后的第二幀圖像，其中，不同的人臉關鍵區域對應的特征調整處理方式不同，并且，同一人臉關鍵區域在不同的目標性別變換模式下，對應的特征調整處理方式也不同；

將所述第一幀圖像中的目標人臉對應的三角剖分模式及性別變換模式，返回給所述中央處理器，其中，所述性別變換模式中包括人臉關鍵區域對應的特征變換處理方式；

所述確定所述第一幀圖像中的人臉關鍵區域之后，還包括：

若所述性別變換指令中未包括三角剖分模式，則根據所述關鍵點集中的關鍵點，對所述第一幀圖像進行三角剖分，確定所述第一幀圖像中的各人臉關鍵區域；

根據所述性別變換指令中的原性別及目標性別，確定待處理的人臉關鍵區域；

對所述待處理的人臉關鍵區域進行特征變換處理，以生成人臉性別變換后的第二幀圖像；

所述方法還包括：

基于人臉識別技術，判斷視頻幀中是否存在人臉，當視頻幀中存在人臉時，基于人臉性別識別技術，識別所述人臉是否為目標人臉；所述目標人臉為與男性特征匹配的人臉或與女性特征匹配的人臉。