[發明專利]人臉三維重建方法、裝置、電子設備及可讀存儲介質

有效

• 申請號: 201911215540.0
• 申請日: 2019-12-02
• 公開（公告）號: CN111161397B
• 公開（公告）日: 2022-08-12
• 發明（設計）人: 賈貝;陳錦偉;馬晨光
• 申請（專利權）人: 支付寶（杭州）信息技術有限公司
• 主分類號: G06T17/00
• 分類號: G06T17/00;G06T7/33;G06V40/16
• 代理公司: 北京眾達德權知識產權代理有限公司 11570
• 代理人: 劉進

本說明書實施例公開了一種人臉三維重建方法，獲取多幀人臉圖像，針對所述多幀人臉圖像中的每幀人臉圖像，將該幀人臉圖像的二維關鍵點集進行三維映射，并根據三維映射得到的三維關鍵點集進行采樣，得到該幀人臉圖像的三維采樣點集；從所述多幀人臉圖像中選取一幀人臉圖像作為目標人臉圖像，針對剩余幀人臉圖像中的每幀人臉圖像，根據該幀人臉圖像的三維采樣點集和所述目標人臉圖像的目標三維人臉數據進行坐標轉換，并對坐標轉換后的三維采樣點集進行配準，得到該幀人臉圖像的配準數據；根據每幀人臉圖像的配準數據和所述目標人臉圖像的三維關鍵點集進行三維重建，得到重建三維人臉圖像。

技術領域

本說明書實施例涉及人臉圖像處理技術領域，尤其涉及一種人臉三維重建方法、裝置、電子設備及可讀存儲介質。

背景技術

隨著人臉識別技術的飛速發展，人臉識別技術越來越多的應用在人們的日常生活中，人臉識別技術應用在例如車站的刷臉進站，超市的刷臉付錢和手機 APP的刷臉登錄等場景中。

目前在刷臉應用場景中，在傳統2D數據基礎上，配合使用3D攝像頭對人臉進行識別會提高人臉識別的效果，但是由于硬件和環境限制，單幀采集到的 3D數據往往質量很差，因此需要采集多幀3D數據，并進行3D人臉的重建，重建后的效果才能滿足識別要求，而重建過程需要對采集的3D人臉數據進行大量的運算。

發明內容

本說明書實施例提供了一種人臉三維重建方法、裝置、電子設備及可讀存儲介質，能夠在確保三維人臉重建的準確度基礎上提高重建效率。

本說明書實施例第一方面提供了一種人臉三維重建方法，包括：

獲取多幀人臉圖像，其中，所述多幀人臉圖像中每幀人臉圖像包括二維人臉數據和三維人臉數據；

針對所述多幀人臉圖像中的每幀人臉圖像，將該幀人臉圖像的二維關鍵點集進行三維映射，并根據三維映射得到的三維關鍵點集進行采樣，得到該幀人臉圖像的三維采樣點集；

從所述多幀人臉圖像中選取一幀人臉圖像作為目標人臉圖像，針對剩余幀人臉圖像中的每幀人臉圖像，根據該幀人臉圖像的三維采樣點集和所述目標人臉圖像的目標三維人臉數據進行坐標轉換，并對坐標轉換后的三維采樣點集進行配準，得到該幀人臉圖像的配準數據，其中，所述剩余幀人臉圖像為所述多幀人臉圖像中除所述目標人臉圖像之外的所有人臉圖像；

根據所述剩余幀人臉圖像中每幀人臉圖像的配準數據和所述目標人臉圖像的三維關鍵點集，對所述目標人臉圖像進行三維重建，得到重建三維人臉圖像。

本說明書實施例第二方面提供了一種人臉三維重建裝置，包括：

人臉圖像獲取單元，用于獲取多幀人臉圖像，其中，所述多幀人臉圖像中每幀人臉圖像包括二維人臉數據和三維人臉數據；

三維采樣點獲取單元，用于針對所述多幀人臉圖像中的每幀人臉圖像，將該幀人臉圖像的二維關鍵點集進行三維映射，并根據三維映射得到的三維關鍵點集進行采樣，得到該幀人臉圖像的三維采樣點集；

配準數據獲取單元，用于從所述多幀人臉圖像中選取一幀人臉圖像作為目標人臉圖像，針對剩余幀人臉圖像中的每幀人臉圖像，根據該幀人臉圖像的三維采樣點集和所述目標人臉圖像的目標三維人臉數據進行坐標轉換，并對坐標轉換后的三維采樣點集進行配準，得到該幀人臉圖像的配準數據，其中，所述剩余幀人臉圖像為所述多幀人臉圖像中除所述目標人臉圖像之外的所有人臉圖像；

三維重建單元，用于根據所述剩余幀人臉圖像中每幀人臉圖像的配準數據和所述目標人臉圖像的三維關鍵點集，對所述目標人臉圖像進行三維重建，得到重建三維人臉圖像。

本說明書實施例第三方面還提供了一種電子設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，所述處理器執行所述程序時實現上述人臉三維重建方法的步驟。