[發明專利]利用2D人臉圖片生成虛擬人物的方法和裝置

有效

• 申請號: 202310671947.4
• 申請日: 2023-06-08
• 公開（公告）號: CN116433812B
• 公開（公告）日: 2023-08-25
• 發明（設計）人: 蘆宏川
• 申請（專利權）人: 海馬云（天津）信息技術有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06N3/0464;G06T3/00;G06T7/33
• 代理公司: 暫無信息
• 代理人: 暫無信息

本申請提供了一種利用2D人臉圖片生成虛擬人物的方法和裝置、電子設備及存儲介質，方法包括：獲取待處理的2D人臉圖片，利用訓練好的卷積神經網絡對所述2D人臉圖片進行處理，得到3DMM人臉模型，其中，所述卷積神經網絡包括人臉模型、光照模型和相機模型；通過將所述3DMM人臉模型通過形狀轉換方法映射到虛擬人物的素體捏臉頭部三維模型，得到虛擬人物，能夠根據單張2D人臉圖片生成與單張2D人臉圖片中人臉高度相似的虛擬人物的頭部模型，從而能夠提高虛擬人物創建的效率和效果。

技術領域

本發明涉及3D建模領域，特別涉及一種利用2D人臉圖片生成虛擬人物的方法和裝置、電子設備及存儲介質。

背景技術

近年來，將現實中的物體、人物等進行數字虛擬化的需求越來越多，尤其是人物的虛擬化，如何快速構建虛擬化人物成為焦點問題。傳統方法使用3d建模軟件，如maya等，需要專業美術人員花費數周時間創建虛擬人物。

現階段主流方法之一，提供一種基礎人物素體模型，在此基礎上使用可調整面部、身體參數，對素體模型進行調整，從而實現快速建模，創建虛擬人物。使用該方法相較于傳統建模方法，可節省大量時間成本，但是為獲取良好虛擬人物效果，不僅需要提供大量的捏臉、體型可調參數，還需通過美術人員對各參數細致調整才能達到理想效果，因此仍需要投入大量時間成本，且無法快速批量生產虛擬人物。隨著虛擬人物發展，普通用戶自定制虛擬人物形象的需求也越來越多。如何使沒有美術基礎的普通用戶，能夠快速創建自己理想的虛擬人物，成為亟待解決的技術問題。

發明內容

有鑒于此，本申請實施例提供一種利用2D人臉圖片生成虛擬人物的方法和裝置、電子設備及存儲介質，能夠根據單張2D人臉圖片生成與單張2D人臉圖片中人臉高度相似的虛擬人物的頭部模型，從而能夠提高虛擬人物創建的效率和效果。

第一方面，本申請實施例提供了一種利用2D人臉圖片生成虛擬人物的方法，包括：

獲取待處理的2D人臉圖片，利用訓練好的卷積神經網絡對所述2D人臉圖片進行處理，得到3DMM人臉模型，其中，所述卷積神經網絡包括人臉模型、光照模型和相機模型；

通過將所述3DMM人臉模型通過形狀轉換方法映射到虛擬人物的素體捏臉頭部三維模型，得到虛擬人物。

第二方面，本申請實施例還提供了一種利用2D人臉圖片生成虛擬人物的裝置，包括：

處理單元，用于獲取待處理的2D人臉圖片，利用訓練好的卷積神經網絡對所述2D人臉圖片進行處理，得到3DMM人臉模型，其中，所述卷積神經網絡包括人臉模型、光照模型和相機模型；

映射單元，用于通過將所述3DMM人臉模型通過形狀轉換方法映射到虛擬人物的素體捏臉頭部三維模型，得到虛擬人物。

第三方面，本申請實施例還提供了一種計算機可讀存儲介質，所述計算機可讀存儲介質上存儲有計算機程序，所述計算機程序被處理器運行時執行如第一方面所述的利用2D人臉圖片生成虛擬人物的方法的步驟。

第四方面，本申請實施例還提供了一種電子設備，包括：處理器、存儲介質和總線，所述存儲介質存儲有所述處理器可執行的機器可讀指令，當電子設備運行時，所述處理器與所述存儲介質之間通過總線通信，所述處理器執行所述機器可讀指令，以執行如第一方面所述的利用2D人臉圖片生成虛擬人物的方法的步驟。