[發明專利]3D人頭重建方法、裝置、設備和介質

有效

• 申請號: 202010549415.X
• 申請日: 2020-06-16
• 公開（公告）號: CN111739167B
• 公開（公告）日: 2023-10-03
• 發明（設計）人: 姜志超;梁柏榮;洪智濱
• 申請（專利權）人: 北京百度網訊科技有限公司
• 主分類號: G06T17/20
• 分類號: G06T17/20;G06T3/00;G06T7/50;G06T7/41;G06T5/50
• 代理公司: 北京品源專利代理有限公司 11332
• 代理人: 孟金喆

本申請實施例公開了一種3D人頭重建方法、裝置、設備和介質，涉及計算機視覺技術，該方法包括：獲取設定數量的二維人頭圖像和各所述二維人頭圖像分別對應的人頭深度圖像；對各所述人頭深度圖像進行人臉姿態角融合，獲得第一人頭網格數據；獲取所述第一人頭網格數據對應的平面網格圖；根據所述平面網格圖和各所述二維人頭圖像執行紋理采樣融合操作，基于獲得的紋理圖生成3D人頭重建結果并進行輸出。本申請實施例可以提高人頭重建的成功率和良品率，改善用戶體驗。

技術領域

本申請實施例涉及圖像處理技術，具體涉及計算機視覺技術，尤其涉及一種3D人頭重建方法、裝置、設備和介質。

背景技術

3D重建技術作為環境感知的關鍵技術之一，其在醫療美容、自動駕駛、虛擬現實、行為分析和動畫制作等多個領域產生廣泛影響。

現有針對3D人頭重建的方案并不多，通常是針對人臉的重建，主流的方法包括以下三類：1)基于傳統方法比如雙目視覺的人臉重建；2)基于模型比如三維形變模型(3DMM)的人臉重建；3)基于卷積神經網絡的端到端人臉重建。

但是，上述第一種方法存在特征點匹配不準確的問題，而第二種和第三種方法存在擬合不準確的問題，換言之，通過現有的人臉重建技術進行人臉重建，存在成功率和良品率較低的問題。

發明內容

本申請實施例公開一種3D人頭重建方法、裝置、設備和介質，以解決通過現有的人臉重建方法進行人臉重建，存在成功率和良品率較低的問題。

第一方面，本申請實施例公開了一種3D人頭重建方法，包括：

獲取設定數量的二維人頭圖像和各所述二維人頭圖像分別對應的人頭深度圖像；

對各所述人頭深度圖像進行人臉姿態角融合，獲得第一人頭網格數據；

獲取所述第一人頭網格數據對應的平面網格圖；

根據所述平面網格圖和各所述二維人頭圖像執行紋理采樣融合操作，基于獲得的紋理圖生成3D人頭重建結果并進行輸出。

第二方面，本申請實施例還公開了一種3D人頭重建裝置，包括：

圖像獲取模塊，用于獲取設定數量的二維人頭圖像和各所述二維人頭圖像分別對應的人頭深度圖像；

姿態角融合模塊，用于對各所述人頭深度圖像進行人臉姿態角融合，獲得第一人頭網格數據；

平面網格圖獲取模塊，用于獲取所述第一人頭網格數據對應的平面網格圖；

重建結果輸出模塊，用于根據所述平面網格圖和各所述二維人頭圖像執行紋理采樣融合操作，基于獲得的紋理圖生成3D人頭重建結果并進行輸出。

第三方面，本申請實施例還公開了一種電子設備，包括：

至少一個處理器；以及

與所述至少一個處理器通信連接的存儲器；其中，

所述存儲器存儲有可被所述至少一個處理器執行的指令，所述指令被所述至少一個處理器執行，以使所述至少一個處理器能夠執行如本申請實施例任一所述的3D人頭重建方法。

第四方面，本申請實施例還公開了一種存儲有計算機指令的非瞬時計算機可讀存儲介質，所述計算機指令用于使所述計算機執行如本申請實施例任一所述的3D人頭重建方法。

根據本申請實施例的技術方案，可以提高人頭重建的成功率和良品率，改善用戶體驗。

應當理解，本部分所描述的內容并非旨在標識本公開的實施例的關鍵或重要特征，也不用于限制本公開的范圍。本公開的其它特征將通過以下的說明書而變得容易理解。

附圖說明