[發(fā)明專利]臉部圖像處理方法、裝置、設(shè)備及計算機存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 201910526812.2
• 申請日: 2019-06-18
• 公開（公告）號: CN112102146A
• 公開（公告）日: 2020-12-18
• 發(fā)明（設(shè)計）人: 王山虎;覃威寧;張濤;朱威;唐杰
• 申請（專利權(quán)）人: 北京陌陌信息技術(shù)有限公司
• 主分類號: G06T3/00
• 分類號: G06T3/00
• 代理公司: 北京東方億思知識產(chǎn)權(quán)代理有限責任公司 11258
• 代理人: 彭瓊

本發(fā)明公開了一種臉部圖像處理方法、裝置、設(shè)備及計算機存儲介質(zhì)，該方法包括：接收并獲取第一用戶的多張第一人臉圖像的關(guān)鍵點；將多張第一人臉圖像的關(guān)鍵點輸入3DMM模型進行聯(lián)合迭代求解，得到第一用戶的人臉對應(yīng)的形狀參數(shù)的統(tǒng)一解；接收并獲取第二用戶的多張第二人臉圖像的關(guān)鍵點；將多張第二人臉圖像的關(guān)鍵點輸入3DMM模型進行聯(lián)合迭代求解，得到每張第二人臉圖像對應(yīng)的表情參數(shù)和姿態(tài)參數(shù)的單一解；將第一用戶的人臉對應(yīng)的形狀參數(shù)的統(tǒng)一解、第二人臉圖像對應(yīng)的表情參數(shù)和姿態(tài)參數(shù)的單一解代入3DMM模型，得到臉部輪廓替換后的換臉圖。根據(jù)本發(fā)明實施例，能夠?qū)θ四樰喞M行替換，提高換臉后的相似程度。

技術(shù)領(lǐng)域

本發(fā)明屬于圖像處理技術(shù)領(lǐng)域，尤其涉及一種臉部圖像處理方法、裝置、設(shè)備及計算機存儲介質(zhì)。

背景技術(shù)

現(xiàn)有在利用3DMM模型求解形狀、表情和姿態(tài)三個特征參數(shù)時，存在耦合的問題，即單張圖求解的整體效果還可以(三個特征參數(shù)整體來看還較為準確)，但單獨看姿態(tài)參數(shù)、表情參數(shù)和形狀參數(shù)是不準確的。因此無法依據(jù)3DMM模型計算出來的形狀、表情和姿態(tài)參數(shù)，來實現(xiàn)交換不同人臉圖像的形狀參數(shù)來達到臉部輪廓替換的需求。

發(fā)明內(nèi)容

本發(fā)明實施例提供一種臉部圖像處理方法、裝置、設(shè)備及計算機存儲介質(zhì)，能夠?qū)θ四樰喞M行替換，提高換臉后的相似程度。

一方面，本發(fā)明實施例提供一種臉部圖像處理方法，該方法包括：

接收第一用戶的多張第一人臉圖像，并分別獲取每張所述第一人臉圖像的關(guān)鍵點；

將多張所述第一人臉圖像的關(guān)鍵點輸入三維形變模型3DMM模型進行聯(lián)合迭代求解，得到所述第一用戶的人臉對應(yīng)的形狀參數(shù)的統(tǒng)一解；

接收第二用戶的多張第二人臉圖像，并分別獲取每張所述第二人臉圖像的關(guān)鍵點；

將多張所述第二人臉圖像的關(guān)鍵點輸入所述3DMM模型進行聯(lián)合迭代求解，得到每張所述第二人臉圖像對應(yīng)的表情參數(shù)和姿態(tài)參數(shù)的單一解；

將所述第一用戶的人臉對應(yīng)的形狀參數(shù)的統(tǒng)一解、所述第二人臉圖像對應(yīng)的表情參數(shù)和姿態(tài)參數(shù)的單一解代入所述3DMM模型，得到將所述第二人臉圖像中的臉部輪廓替換為所述第一用戶的臉部輪廓后的換臉圖。

另一方面，本發(fā)明實施例提供了一種臉部圖像處理裝置，該裝置包括：

第一接收模塊，用于接收第一用戶的多張第一人臉圖像，并分別獲取每張所述第一人臉圖像的關(guān)鍵點；

第一求解模塊，用于將多張所述第一人臉圖像的關(guān)鍵點輸入三維形變模型3DMM模型進行聯(lián)合迭代求解，得到所述第一用戶的人臉對應(yīng)的形狀參數(shù)的統(tǒng)一解；

第二接收模塊，用于接收第二用戶的多張第二人臉圖像，并分別獲取每張所述第二人臉圖像的關(guān)鍵點；

第二求解模塊，用于將多張所述第二人臉圖像的關(guān)鍵點輸入所述3DMM模型進行聯(lián)合迭代求解，得到每張所述第二人臉圖像對應(yīng)的表情參數(shù)和姿態(tài)參數(shù)的單一解；

第一替換模塊，用于將所述第一用戶的人臉對應(yīng)的形狀參數(shù)的統(tǒng)一解、所述第二人臉圖像對應(yīng)的表情參數(shù)和姿態(tài)參數(shù)的單一解代入所述3DMM模型，得到將所述第二人臉圖像中的臉部輪廓替換為所述第一用戶的臉部輪廓后的換臉圖。

再一方面，本發(fā)明實施例提供了一種臉部圖像處理設(shè)備，該設(shè)備包括：

處理器以及存儲有計算機程序指令的存儲器；

所述處理器執(zhí)行所述計算機程序指令時實現(xiàn)如以上任意一項所述的臉部圖像處理方法。

再一方面，本發(fā)明實施例提供了一種計算機存儲介質(zhì)，所述計算機存儲介質(zhì)上存儲有計算機程序指令，所述計算機程序指令被處理器執(zhí)行時實現(xiàn)如以上任意一項所述的臉部圖像處理方法。