[發明專利]人臉形狀卡通化方法、裝置、設備及存儲介質

在審

• 申請號: 202210307587.5
• 申請日: 2022-03-25
• 公開（公告）號: CN114627216A
• 公開（公告）日: 2022-06-14
• 發明（設計）人: 梁彥軍
• 申請（專利權）人: 北京奇藝世紀科技有限公司
• 主分類號: G06T13/40
• 分類號: G06T13/40;G06T17/20;G06T19/20
• 代理公司: 北京華夏泰和知識產權代理有限公司 11662
• 代理人: 唐會娜

本申請涉及一種人臉形狀卡通化方法、裝置、設備及存儲介質，其中，所述方法包括：獲取預設的三維初始卡通形狀；獲取輸入的人臉圖像；將所述人臉圖像輸入到三維可變形模型中，得到預測的身份系數和表情系數；利用所述身份系數和所述表情系數對所述三維可變形模型對應的初始三維形狀進行變形處理，得到重建三維形狀；基于所述重建三維形狀，對所述三維初始卡通形狀進行變形處理，得到所述人臉圖像對應的目標三維卡通形狀。本申請用以解決現有技術中，無法通過圖片生成用戶個性化的三維卡通化形象的技術問題。

技術領域

本申請涉及人工智能技術領域，尤其涉及一種人臉形狀卡通化方法、裝置、設備及存儲介質。

背景技術

目前，特效相機和拍攝道具等功能已經成為了視頻類的應用程序的標配，用戶只需要上傳一張照片或是一段視頻，就可以自動合成卡通風格的個性化的臉部特效，但是，目前合成卡通風格的個性化臉部特效僅限在二維圖像的卡通化上，無法通過圖片生成用戶個性化的三維卡通化形象。

發明內容

本申請提供了一種人臉形狀卡通化方法、裝置、設備及存儲介質，用以解決現有技術中，無法通過圖片生成用戶個性化的三維卡通化形象的技術問題。

第一方面，本申請提供了一種人臉形狀卡通化方法，包括：

獲取預設的三維初始卡通形狀；

獲取輸入的人臉圖像；

將所述人臉圖像輸入到三維可變形模型中，得到預測的身份系數和表情系數；

利用所述身份系數和所述表情系數對所述三維可變形模型對應的初始三維形狀進行變形處理，得到重建三維形狀；

基于所述重建三維形狀，對所述三維初始卡通形狀進行變形處理，得到所述人臉圖像對應的目標三維卡通形狀。

可選的，所述基于所述重建三維形狀，對所述三維初始卡通形狀進行變形處理，得到所述人臉圖像對應的目標三維卡通形狀，包括：

獲取所述三維初始卡通形狀與所述初始三維形狀之間的三角面片間的對應關系；

計算所述初始三維形狀和所述重建三維形狀之間的變形梯度；

根據所述對應關系，將所述變形梯度遷移到所述三維初始卡通形狀上，得到所述目標三維卡通形狀。

可選的，所述獲取所述三維初始卡通形狀與所述初始三維形狀之間的三角面片間的對應關系，包括：

對齊所述三維初始卡通形狀和所述初始三維形狀；

獲取所述初始三維形狀和所述三維初始卡通形狀之間預先標定好的關鍵點對；

將所述關鍵點對作為初始點對，利用迭代最近點算法查找所述三維初始卡通形狀和所述初始三維形狀之間的三角面片間的對應關系。

可選的，所述獲取所述初始三維形狀和所述三維初始卡通形狀之間預先標定好的關鍵點對，包括：

獲取在所述三維初始卡通形狀和所述初始三維形狀上標注的第一數量的關鍵點對的位置；

利用所述第一數量的關鍵點的位置，對預設插值模型進行訓練，得到訓練后的插值模型；

獲取在所述初始三維形狀上，標注的第二數量的關鍵點的位置；

將所述第二數量的關鍵點的位置輸入到所述訓練后的插值模型中，得到所述第二數量的關鍵點中的每一個關鍵點對應的在所述三維初始卡通形狀上的關鍵點的位置，得到第二數量的關鍵點對；

將所述第一數量的關鍵點對和所述第二數量的關鍵點對，作為所述預先標定好的關鍵點對。

可選的，所述獲取預設的三維初始卡通形狀，包括：