[發明專利]三維人臉的重建方法、裝置、電子設備以及存儲介質

在審

• 申請號: 202110151906.3
• 申請日: 2021-02-03
• 公開（公告）號: CN112819947A
• 公開（公告）日: 2021-05-18
• 發明（設計）人: 俞云杰;黃晗;郭彥東
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T15/00;G06T15/50;G06N3/04;G06N3/08
• 代理公司: 深圳市智圈知識產權代理事務所(普通合伙) 44351
• 代理人: 呂靜

本申請公開了一種三維人臉的重建方法、裝置、電子設備以及存儲介質，涉及電子設備技術領域。該方法包括：獲取待重建人臉的形狀參數和紋理參數，將形狀參數輸入第一模型，獲得第一模型輸出的三維人臉形狀，將紋理參數輸入第二模型，獲得第二模型輸出的人臉紋理貼圖，其中，第一模型和第二模型中的至少一個基于生成對抗網絡訓練獲得，基于三維人臉形狀和人臉紋理貼圖，生成目標三維人臉，其中，目標三維人臉包括基于人臉紋理貼圖生成的紋理信息。本申請通過訓練好的生成對抗網絡來生成三維人臉形狀和/或人臉紋理貼圖，使得生成的目標三維人臉具有豐富的細節特征，提升三維人臉的重建效果。

技術領域

本申請涉及電子設備技術領域，更具體地，涉及一種三維人臉的重建方法、裝置、電子設備以及存儲介質。

背景技術

在計算機視覺和計算機圖形學領域，三維人臉重建是一個熱度逐漸上升的話題，由于它能廣泛地應用于人臉識別、人臉編輯、人機交互、表情驅動的動畫、增強現實、虛擬現實等領域。而基于單張RGB圖像的三維人臉重建—即利用單張RGB圖像重建出三維人臉形狀和紋理，更是一個經久不衰的話題。目前，基于單張RGB圖像重建的三維人臉的細節較差，缺乏逼真性。

發明內容

鑒于上述問題，本申請提出了一種三維人臉的重建方法、裝置、電子設備以及存儲介質，以解決上述問題。

第一方面，本申請實施例提供了一種三維人臉的重建方法，所述方法包括：獲取待重建人臉的形狀參數和紋理參數；將所述形狀參數輸入第一模型，獲得所述第一模型輸出的三維人臉形狀；將所述紋理參數輸入第二模型，獲得所述第二模型輸出的人臉紋理貼圖，其中，所述第一模型和所述第二模型中的至少一個基于生成對抗網絡訓練獲得；基于所述三維人臉形狀和所述人臉紋理貼圖，生成目標三維人臉，其中，所述目標三維人臉包括基于所述人臉紋理貼圖生成的紋理信息。

第二方面，本申請實施例提供了一種三維人臉的重建裝置，所述裝置包括：參數獲取模塊，用于獲取待重建人臉的形狀參數和紋理參數；人臉形狀獲得模塊，用于將所述形狀參數輸入第一模型，獲得所述第一模型輸出的三維人臉形狀；紋理貼圖獲得模塊，用于將所述紋理參數輸入第二模型，獲得所述第二模型輸出的人臉紋理貼圖，其中，所述第一模型和所述第二模型中的至少一個基于生成對抗網絡訓練獲得；三維人臉生成模塊，用于基于所述三維人臉形狀和所述人臉紋理貼圖，生成目標三維人臉，其中，所述目標三維人臉包括基于所述人臉紋理貼圖生成的紋理信息。

第三方面，本申請實施例提供了一種電子設備，包括存儲器和處理器，所述存儲器耦接到所述處理器，所述存儲器存儲指令，當所述指令由所述處理器執行時所述處理器執行上述方法。

第四方面，本申請實施例提供了一種計算機可讀取存儲介質，所述計算機可讀取存儲介質中存儲有程序代碼，所述程序代碼可被處理器調用執行上述方法。

本申請實施例提供的三維人臉的重建方法、裝置、電子設備以及存儲介質，獲取待重建人臉的形狀參數和紋理參數，將形狀參數輸入第一模型，獲得第一模型輸出的三維人臉形狀，將紋理參數輸入第二模型，獲得第二模型輸出的人臉紋理貼圖，其中，第一模型和第二模型中的至少一個基于生成對抗網絡訓練獲得，基于三維人臉形狀和人臉紋理貼圖，生成目標三維人臉，其中，目標三維人臉包括基于人臉紋理貼圖生成的紋理信息，從而通過訓練好的生成對抗網絡來生成三維人臉形狀和/或人臉紋理貼圖，使得生成的目標三維人臉具有豐富的細節特征，提升三維人臉的重建效果。

附圖說明

為了更清楚地說明本申請實施例中的技術方案，下面將對實施例描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本申請的一些實施例，對于本領域技術人員來講，在不付出創造性勞動的前提下，還可以根據這些附圖獲得其它的附圖。

圖1示出了本申請一個實施例提供的三維人臉的重建方法的流程示意圖；

圖2示出了本申請又一個實施例提供的三維人臉的重建方法的流程示意圖；