[發明專利]一種三維人臉重建方法及裝置、設備和存儲介質

在審

• 申請號: 201811435701.2
• 申請日: 2018-11-28
• 公開（公告）號: CN109584358A
• 公開（公告）日: 2019-04-05
• 發明（設計）人: 樸鏡潭;王權;錢晨;王燦彬;李佳樺
• 申請（專利權）人: 深圳市商湯科技有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T19/20;G06T5/50;G06K9/00
• 代理公司: 北京派特恩知識產權代理有限公司 11270
• 代理人: 王軍紅;張穎玲

1.一種三維人臉重建方法，其特征在于，包括：

獲取RGB圖像和與所述RGB圖像對應的深度圖像；

對所述RGB圖像和所述深度圖像對齊后的圖像進行人臉檢測，確定人臉信息；

對所述人臉信息進行處理，生成人臉模型。

2.根據權利要求1所述的方法，其特征在于，所述人臉模型至少包括以下之一：人臉面具和三維人臉模型；所述人臉面具包含人臉結構特征，所述三維人臉模型包含人臉結構特征和人臉紋理信息。

3.根據權利要求1所述的方法，其特征在于，所述獲取RGB圖像和與所述RGB圖像對應的深度圖像，包括：

采用攝像頭獲取單幀RGB圖像，并采用深度攝像機獲取所述單幀RGB圖像對應的深度圖像；

或者，

所述獲取RGB圖像和與所述RGB圖像對應的深度圖像，包括：采用雙攝像頭獲取兩個單幀RGB圖像；

根據所述兩個單幀RGB圖像確定所述兩個單幀RGB圖像對應的深度圖像。

4.根據權利要求3所述的方法，其特征在于，所述對所述人臉信息進行處理，生成人臉模型，包括：

對所述人臉信息進行過濾，得到過濾后的人臉信息；

根據所述過濾后的人臉信息的空間分布信息，生成人臉面具。

5.根據權利要求1所述的方法，其特征在于，所述獲取RGB圖像和與所述RGB圖像對應的深度圖像，包括：

獲取所述M幀RGB圖像，并分別獲取與所述M幀RGB圖像對應的M幀深度圖像；其中，所述M幀RGB圖像包括同一人臉的不同角度的圖像；M為大于1的整數。

6.根據權利要求5所述的方法，其特征在于，所述對所述人臉信息進行處理，生成人臉模型，包括：

根據所述M幀深度圖像的人臉信息，從所述M幀深度圖像中篩選出滿足預設條件的N幀有效深度圖，N為大于0的整數，且N小于等于M；

將所述N幀有效深度圖進行融合，得到融合圖像；

根據所述融合圖像的人臉信息和預設的標準人臉模型，得到所述三維人臉模型。

7.根據權利要求6所述的方法，其特征在于，所述根據所述融合圖像的人臉信息和預設的標準人臉模型，得到所述三維人臉模型，包括：

將根據所述融合圖像的人臉信息對所述預設的標準人臉模型中人臉信息進行調整，得到初步三維人臉模型；

確定所述融合圖像對應的人臉紋理信息；

將所述人臉紋理信息輸入所述初步三維人臉模型，得到所述三維人臉模型。

8.一種三維人臉重建裝置，其特征在于，所述裝置包括：第一獲取模塊、第一檢測模塊和第一生成模塊，其中：

所述第一獲取模塊，用于獲取RGB圖像與所述RGB圖像對應的深度圖像；

所述第一檢測模塊，用于對所述RGB圖像和所述深度圖像對齊后的圖像進行人臉檢測，確定人臉信息；

所述第一生成模塊，用于對所述人臉信息進行處理，生成人臉模型。

9.一種計算機存儲介質，其特征在于，所述計算機存儲介質上存儲有計算機可執行指令，該計算機可執行指令被執行后，能夠實現權利要求1至7任一項所述的方法步驟。

10.一種計算機設備，其特征在于，所述計算機設備包括存儲器和處理器，所述存儲器上存儲有計算機可執行指令，所述處理器運行所述存儲器上的計算機可執行指令時可實現權利要求1至7任一項所述的方法步驟。