[發明專利]確定面部深度圖的方法和裝置

有效

• 申請號: 201811231805.1
• 申請日: 2018-10-22
• 公開（公告）號: CN111080689B
• 公開（公告）日: 2023-04-14
• 發明（設計）人: 楊宏偉;李杰;夏循龍;毛慧;浦世亮
• 申請（專利權）人: 杭州海康威視數字技術股份有限公司
• 主分類號: G06T7/55
• 分類號: G06T7/55
• 代理公司: 北京三高永信知識產權代理有限責任公司 11138
• 代理人: 韓東艷

本申請公開了一種確定面部深度圖的方法和裝置，屬于計算機視覺領域。所述方法包括：獲取目標用戶的第一二維面部圖像和第二二維面部圖像，基于所述第一二維面部圖像和第二二維面部圖像，確定所述目標用戶的初始的面部深度圖；基于所述初始的面部深度圖，確定所述第一二維面部圖像中面部像素點的法向信息；根據所述面部像素點的法向信息，在所述第二二維面部圖像中，確定對應的像素值與所述面部像素點的像素值相似度最高的目標匹配位置，根據所述目標匹配位置，確定所述面部像素點對應的深度值；基于所述第一二維面部圖像中每個面部像素點對應的深度值，確定所述目標用戶的更正后的面部深度圖。采用本申請，可以得到更加準確的面部深度圖。

技術領域

本申請涉及計算機視覺技術領域，特別涉及一種確定面部深度圖的方法和裝置。

背景技術

隨著圖像處理技術的發展，面部圖像處理技術也得到了廣泛應用，例如，面部識別、面部跟蹤、面部對齊等。很多面部圖像處理都需要使用到面部深度圖，面部深度圖像由面部圖像中面部像素點對應的深度值組成。

對于面部深度圖的確定主要有兩類方法：一類是通過高精度的光學測量設備進行采集，例如，使用基于結構光技術和線激光技術的3D掃描儀進行面部深度圖的確定；另一類是雙目立體視覺方法。

雙目立體視覺方法，是利用兩個拍攝部件在不同視角對目標用戶的面部進行拍攝，得到兩張面部圖像。然后，對于其中一張面部圖像中的每個像素點，在另一張面部圖像中確定出與其相對應的像素點的位置信息，確定方法是，先基于該像素點位置確定出以該像素點為中心的像素塊，其中，常用的像素塊的尺寸為5×5。再在另一張面部圖像上確定出與該像素塊相似度最高的5×5的像素塊，對這兩個像素塊的中心像素點的位置信息求差，得到兩個中心像素點的視差值，再由視差值可計算得到該像素點對應的深度值，對每個像素點都進行上述處理，便得到了面部圖像中各像素點對應的深度值，即可以確定出面部圖像的面部深度圖。

在實現本申請的過程中，發明人發現相關技術至少存在以下問題：

相關技術中，由于拍攝的視角不同，在一張面部圖像中的5×5的像素塊在另一張目標圖像中相對應的像素塊的形狀已經不再是5×5的正方形，這樣確定出的中心像素點的位置信息也就會不準確，那么最后得到的面部深度圖中的深度值也就會不準確。

發明內容

為了解決現有技術的問題，本申請實施例提供了一種確定面部深度圖的方法和裝置。所述技術方案如下：

第一方面，提供了一種確定面部深度圖的方法，所述方法包括：

獲取目標用戶的第一二維面部圖像和第二二維面部圖像，基于所述第一二維面部圖像和第二二維面部圖像，確定所述目標用戶的初始的面部深度圖；

基于所述初始的面部深度圖，確定所述第一二維面部圖像中面部像素點的法向信息；

對于所述第一二維面部圖像中每個面部像素點，根據所述面部像素點的法向信息，在所述第二二維面部圖像中，確定對應的像素值與所述面部像素點的像素值相似度最高的目標匹配位置，根據所述目標匹配位置，確定所述面部像素點對應的深度值；

基于所述第一二維面部圖像中每個面部像素點對應的深度值，確定所述目標用戶的更正后的面部深度圖。

可選的，所述根據所述面部像素點的法向信息，在所述第二二維面部圖像中，確定對應的像素值與所述面部像素點的像素值相似度最高的目標匹配位置，包括：

根據所述面部像素點的法向信息，確定所述面部像素點的深度值和匹配位置的函數關系，基于所述函數關系確定所述匹配位置的可取值集合，在所述可取值集合中，確定對應的像素值與所述面部像素點的像素值相似度最高的目標匹配位置，其中，所述匹配位置為所述面部像素點在所述第二二維面部圖像中對應的面部像素點的位置；

所述根據所述目標匹配位置，確定所述面部像素點對應的深度值，包括：