[發明專利]三維風格人臉的生成方法、裝置、設備及存儲介質

在審

• 申請號: 202210156774.8
• 申請日: 2022-02-21
• 公開（公告）號: CN114529685A
• 公開（公告）日: 2022-05-24
• 發明（設計）人: 蘆愛余;衛華威
• 申請（專利權）人: 佛山虎牙虎信科技有限公司
• 主分類號: G06T17/10
• 分類號: G06T17/10;G06T19/20;G06V10/77;G06K9/62
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 李彩玲

本發明公開了一種三維風格人臉的生成方法、裝置、設備及存儲介質。該方法包括：獲取標注有人臉關鍵點的二維人臉圖像，并根據人臉關鍵點構建與二維人臉圖像中的真實人臉完全匹配的三維真實人臉；建立標準三維風格人臉的PCA模型與三維真實人臉的PCA模型之間的映射關系；根據映射關系對標準三維風格人臉進行調整，得到與二維人臉圖像對應的三維風格人臉。本發明實施例的技術方案，可以基于單張圖片，快速生成保留用戶人臉特征信息的三維風格人臉。

技術領域

本發明涉及三維人臉重建技術領域，尤其涉及一種三維風格人臉的生成方法、裝置、設備及存儲介質。

背景技術

目前，直播應用通過構建虛擬互動空間和用戶對應的三維虛擬形象，使得主播和觀看用戶可以使用三維虛擬形象在三維虛擬空間中進行互動。

三維虛擬形象可分為三維真實人臉和三維風格人臉，三維真實人臉的目標是貼近用戶原本的形象，三維風格人臉的目標是將用戶原本的形象卡通化一些。現有技術中，根據單張圖片生成三維真實人臉的技術相對成熟，但生成三維風格人臉更多是依靠用戶“手捏”。由于三維風格人臉可捏的維度太多，用戶不好控制，因此很難做到三維風格人臉與用戶相像。

發明內容

本發明提供了一種三維風格人臉的生成方法、裝置、設備及存儲介質，以解決用戶“手捏”的三維風格人臉與用戶人臉相似度低的問題。

根據本發明的一方面，提供了一種三維風格人臉的生成方法，包括：

獲取標注有人臉關鍵點的二維人臉圖像，并根據人臉關鍵點構建與二維人臉圖像中的真實人臉完全匹配的三維真實人臉；

建立標準三維風格人臉的主成分分析(Principal Component Analysis，PCA)模型與三維真實人臉的PCA模型之間的映射關系；

根據映射關系對標準三維風格人臉進行調整，得到與二維人臉圖像對應的三維風格人臉。

可選的，建立標準三維風格人臉的PCA模型與三維真實人臉的PCA模型之間的映射關系，包括：

建立標準三維風格人臉的PCA模型與三維真實人臉的PCA模型之間的PCA基映射關系以及幅度映射關系。

可選的，建立標準三維風格人臉的PCA模型與三維真實人臉的PCA模型之間的PCA基映射關系以及幅度映射關系，包括：

在標準三維風格人臉的PCA模型中，獲取與目標人臉形狀維度對應的第一PCA基以及第一PCA基的幅度值；

在三維真實人臉的PCA模型中，查詢與目標人臉形狀維度對應的第二PCA基以及第二PCA基的幅度值；

建立第一PCA基以及第一PCA基的幅度值與第二PCA基以及第二PCA基的幅度值之間的映射關系。

可選的，確定標準三維風格人臉的第一PCA基的幅度值，包括：

在標準三維風格人臉不畸形的情況下，獲取第一PCA基的坐標最小值和坐標最大值；

將坐標最小值和坐標最大值的均值作為第一PCA基的幅度值。

可選的，根據映射關系對標準三維風格人臉進行調整，得到與二維人臉圖像對應的三維風格人臉，包括：

將標準三維風格人臉中已建立映射關系的每個PCA基的人臉形狀系數，更新為三維真實人臉中的對應PCA基的人臉形狀系數；

將標準三維風格人臉中已建立映射關系的每個PCA基的幅度值，更新為三維真實人臉中的對應PCA基的幅度值；

將更新后的標準三維風格人臉作為與二維人臉圖像對應的三維風格人臉。

可選的，在構建標準三維風格人臉的PCA模型與三維真實人臉的PCA模型之間的映射關系之前，還包括：