[發明專利]一種模型頭像創建方法、裝置、電子設備和存儲介質

有效

• 申請號: 202011606349.1
• 申請日: 2020-12-30
• 公開（公告）號: CN112669447B
• 公開（公告）日: 2023-06-30
• 發明（設計）人: 林江科;袁燚;胡志鵬
• 申請（專利權）人: 網易(杭州)網絡有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T15/00
• 代理公司: 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463
• 代理人: 畢翔宇

本申請提供了一種模型頭像創建方法、裝置、電子設備和存儲介質，其中，該方法包括：根據目標源圖像，得到所述目標源圖像的第一人臉Mesh，根據第一人臉Mesh的第二關鍵點在三維坐標系上的坐標對目標頭部三維網格模型的第三人臉Mesh中對應的第三關鍵點進行移動，并根據第三關鍵點的移動值，對目標頭部三維網格模型中的第一非關鍵點進行遷移，根據第三人臉Mesh，對目標源圖像中的皮膚部分進行二維貼圖展開，得到二維紋理貼圖；將二維紋理貼圖加載到所述待貼圖的頭部三維網格模型上，得到覆蓋有人臉貼圖的頭部三維網格模型，通過上述方法可以將源圖像的人臉移植到頭部三維模型上。

技術領域

本申請涉及計算機技術領域，具體而言，涉及一種模型頭像創建方法、裝置、電子設備和存儲介質。

背景技術

隨著圖像技術的發展，目前出現了圖像換臉技術，即：可以將一張圖像(源圖像)上的人臉移植到另一張圖像(目標圖像)上，從而使得到的新圖像具有源圖像的人臉和目標圖像中除了人臉部分之外的其他身體特征，現有的圖像換臉技術是通過3DMM(3D?MorphableModel，三維人臉可變形模型)技術生成的，即：通過3DMM技術得到源圖像的人臉Mesh(人臉區域的三角網格，是一種三維結構)，然后將該人臉Mesh變換為二維人臉圖像后投影到目標圖像的臉部區域。

但是對于頭部三維模型的換臉，由于頭部三維模型的人臉Mesh的拓撲結構與通過3DMM技術得到的人臉Mesh的拓撲結構是不同的，因此上述換臉技術并不能應用到頭部三維模型的換臉中，頭部三維模型的換臉技術是目前亟需解決的問題。

發明內容

有鑒于此，本申請實施例提供了一種模型頭像創建方法、裝置、電子設備和存儲介質，以將源圖像的人臉移植到頭部三維模型上。

第一方面，本申請實施例提供了一種模型頭像創建方法，包括：

根據目標源圖像，得到所述目標源圖像的三維人臉可變形模型3DMM的第一人臉Mesh，其中，所述目標源圖像為包括人臉部分的二維圖像；

根據為標準3DMM的第二人臉Mesh設定的第一關鍵點，確定所述第一人臉Mesh中對應位置上的第二關鍵點；

對于每個所述第二關鍵點，將第三人臉Mesh中與該第二關鍵點對應的第三關鍵點移動至該第二關鍵點在三維坐標系的坐標上，其中，所述第三人臉Mesh為目標頭部三維網格模型的3DMM的人臉Mesh，所述第三人臉Mesh的拓撲結構包括多個頂點，所述多個頂點由所述第三關鍵點和第一非關鍵點構成；

根據各所述第三關鍵點的移動值，對所述目標頭部三維網格模型中的所述第一非關鍵點進行遷移，得到待貼圖的頭部三維網格模型；

根據所述第三人臉Mesh，對所述目標源圖像中的皮膚部分進行二維貼圖展開，得到二維紋理貼圖；

將所述二維紋理貼圖加載到所述待貼圖的頭部三維網格模型上，得到覆蓋有人臉貼圖的頭部三維網格模型。

可選地，所述根據目標源圖像，得到所述目標源圖像的3DMM的第一人臉Mesh，包括：

將所述目標源圖像輸入到形狀重建器中，得到所述目標源圖像的3DMM系數，其中，所述3DMM系數包括：所述目標源圖像的人臉身份系數和所述目標源圖像的人臉表情系數；

將所述3DMM系數輸入到3DMM公式中，得到所述第一人臉Mesh。

可選地，所述將所述二維紋理貼圖加載到所述待貼圖的頭部三維網格模型上，得到覆蓋有人臉貼圖的頭部三維網格模型，包括：

通過泊松融合方法，將所述二維紋理貼圖融合到頭部模板紋理貼圖上，得到紋理融合貼圖，其中，所述頭部模板紋理貼圖為包括耳朵和額頭以上部位的頭部貼圖；

將所述紋理融合貼圖加載到所述待貼圖的頭部三維網格模型上，得到覆蓋有人臉貼圖的頭部三維網格模型。