[發明專利]一種模型頭像創建方法、裝置、電子設備和存儲介質有效
| 申請號: | 202011606349.1 | 申請日: | 2020-12-30 |
| 公開(公告)號: | CN112669447B | 公開(公告)日: | 2023-06-30 |
| 發明(設計)人: | 林江科;袁燚;胡志鵬 | 申請(專利權)人: | 網易(杭州)網絡有限公司 |
| 主分類號: | G06T17/00 | 分類號: | G06T17/00;G06T15/00 |
| 代理公司: | 北京超凡宏宇專利代理事務所(特殊普通合伙) 11463 | 代理人: | 畢翔宇 |
| 地址: | 310052 浙江省杭州*** | 國省代碼: | 浙江;33 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 模型 頭像 創建 方法 裝置 電子設備 存儲 介質 | ||
1.一種模型頭像創建方法,其特征在于,包括:
根據目標源圖像,得到所述目標源圖像的三維人臉可變形模型3DMM的第一人臉Mesh,其中,所述目標源圖像為包括人臉部分的二維圖像;
根據為標準3DMM的第二人臉Mesh設定的第一關鍵點,確定所述第一人臉Mesh中對應位置上的第二關鍵點,其中,所述標準3DMM為預設的標準人臉的3DMM;
對于每個所述第二關鍵點,將第三人臉Mesh中與該第二關鍵點對應的第三關鍵點移動至該第二關鍵點在三維坐標系的坐標上,其中,所述第三人臉Mesh為目標頭部三維網格模型的3DMM的人臉Mesh,所述第三人臉Mesh的拓撲結構包括多個頂點,所述多個頂點由所述第三關鍵點和第一非關鍵點構成;
根據各所述第三關鍵點的移動值,對所述目標頭部三維網格模型中的所述第一非關鍵點進行遷移,得到待貼圖的頭部三維網格模型;
根據所述第三人臉Mesh,對所述目標源圖像中的皮膚部分進行二維貼圖展開,得到二維紋理貼圖;
將所述二維紋理貼圖加載到所述待貼圖的頭部三維網格模型上,得到覆蓋有人臉貼圖的頭部三維網格模型。
2.如權利要求1所述的方法,其特征在于,所述根據目標源圖像,得到所述目標源圖像的3DMM的第一人臉Mesh,包括:
將所述目標源圖像輸入到形狀重建器中,得到所述目標源圖像的3DMM系數,其中,所述3DMM系數包括:所述目標源圖像的人臉身份系數和所述目標源圖像的人臉表情系數;
將所述3DMM系數輸入到3DMM公式中,得到所述第一人臉Mesh。
3.如權利要求1所述的方法,其特征在于,所述將所述二維紋理貼圖加載到所述待貼圖的頭部三維網格模型上,得到覆蓋有人臉貼圖的頭部三維網格模型,包括:
通過泊松融合方法,將所述二維紋理貼圖融合到頭部模板紋理貼圖上,得到紋理融合貼圖,其中,所述頭部模板紋理貼圖為包括耳朵和額頭以上部位的頭部貼圖;
將所述紋理融合貼圖加載到所述待貼圖的頭部三維網格模型上,得到覆蓋有人臉貼圖的頭部三維網格模型。
4.如權利要求3所述的方法,其特征在于,在將所述二維紋理貼圖融合到頭部模板紋理貼圖上之前,所述方法還包括:
計算所述目標源圖像中的皮膚部分的第一像素平均值,以將所述第一像素平均值作為第一膚色值;
將所述頭部模板紋理貼圖的膚色調整為所述第一膚色值對應的膚色。
5.如權利要求3所述的方法,其特征在于,所述將所述紋理融合貼圖加載到所述待貼圖的頭部三維網格模型上,得到覆蓋有人臉貼圖的頭部三維網格模型,包括:
將所述目標源圖像輸入到訓練好的圖像編碼器中,得到所述目標源圖像的第一圖像隱層特征;
將所述紋理融合貼圖輸入到訓練好的紋理編碼器中,得到所述紋理融合貼圖的第一紋理隱層特征;
對所述第一圖像隱層特征和所述第一紋理隱層特征進行向量拼接,得到第一拼接隱層特征;
將所述第一拼接隱層特征輸入到訓練好的紋理解碼器中,得到去除高光、陰影和雜質的第一優化紋理貼圖;
將所述第一優化紋理貼圖加載到所述待貼圖的頭部三維網格模型上,得到覆蓋有人臉貼圖的頭部三維網格模型。
6.如權利要求1所述的方法,其特征在于,所述目標頭部三維網格模型包括三維游戲中待創建的虛擬角色的頭部三維網格模型。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于網易(杭州)網絡有限公司,未經網易(杭州)網絡有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202011606349.1/1.html,轉載請聲明來源鉆瓜專利網。





