[發明專利]去除圖像中鏡片反光的圖像處理方法、裝置和終端設備

有效

• 申請號: 201810179783.2
• 申請日: 2018-03-05
• 公開（公告）號: CN108564540B
• 公開（公告）日: 2020-07-17
• 發明（設計）人: 黃海東
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06K9/00
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 張潤

1.一種去除圖像中鏡片反光的圖像處理方法，其特征在于，包括：

生成彩色圖像和深度圖像；

基于人臉識別算法，從所述彩色圖像中提取出人臉區域；

根據所述彩色圖像和所述深度圖像確定所述人臉區域中的反光區域，其中，獲取生成所述深度圖像時結構光的強度信息，并根據所述強度信息確定鏡片區域，根據所述深度圖像從所述鏡片區域中獲取人眼區域，根據所述鏡片區域和所述人眼區域確定所述鏡片區域中的非人眼區域，對所述非人眼區域進行高光檢測，確定反光區域；以及

對所述反光區域進行圖像修正處理。

2.如權利要求1所述的方法，其特征在于，生成彩色圖像和深度圖像，包括：

通過圖像傳感器捕獲攝像頭所拍攝的彩色圖像；

通過結構光傳感器獲取利用結構光生成的深度圖像。

3.如權利要求2所述的方法，其特征在于，通過結構光傳感器獲取利用結構光生成的深度圖像，包括：

通過結構光投射器向人臉投射結構光，并通過所述結構光傳感器獲取經過所述人臉的結構光圖像；

對所述結構光圖像進行解碼處理，以生成所述深度圖像。

4.如權利要求3所述的方法，其特征在于，對所述結構光圖像進行解碼處理，以生成所述深度圖像，包括：

解碼所述結構光圖像中變形位置像素對應的相位信息；

將所述相位信息轉化為高度信息；

根據所述高度信息生成所述深度圖像。

5.如權利要求1所述的方法，其特征在于，對所述反光區域進行圖像修正處理，包括：

獲取所述人臉區域的皮膚特征信息；

根據所述人臉區域的皮膚特征信息對所述反光區域進行圖像修正處理。

6.如權利要求1所述的方法，其特征在于，對所述非人眼區域進行高光檢測，確定反光區域，包括：

獲取所述非人眼區域中像素的亮度信息；

當所述非人眼區域中像素的亮度信息大于預設亮度值時，確定所述非人眼區域中的高亮像素；

將所述高亮像素組成的集合作為所述反光區域。

7.如權利要求1所述的方法，其特征在于，還包括：

在根據所述深度圖像從所述鏡片區域中獲取人眼區域之后，利用邊緣增強算法對所述人眼區域進行銳化處理。

8.一種去除圖像中鏡片反光的圖像處理裝置，其特征在于，包括：

生成模塊，用于生成彩色圖像和深度圖像；

提取模塊，用于基于人臉識別算法，從所述彩色圖像中提取出人臉區域；

確定模塊，用于根據所述彩色圖像和所述深度圖像確定所述人臉區域中的反光區域，其中，所述確定模塊獲取生成所述深度圖像時結構光的強度信息，并根據所述強度信息確定鏡片區域，根據所述深度圖像從所述鏡片區域中獲取人眼區域，根據所述鏡片區域和所述人眼區域確定所述鏡片區域中的非人眼區域，對所述非人眼區域進行高光檢測，確定反光區域；以及

處理模塊，用于修正對所述反光區域進行圖像修正處理。

9.如權利要求8所述的裝置，其特征在于，所述生成模塊，用于：

通過圖像傳感器捕獲攝像頭所拍攝的彩色圖像；

通過結構光傳感器獲取利用結構光生成的深度圖像。

10.如權利要求9所述的裝置，其特征在于，所述生成模塊，用于：

通過結構光投射器向人臉投射結構光，并通過所述結構光傳感器獲取經過所述人臉的結構光圖像；

對所述結構光圖像進行解碼處理，以生成所述深度圖像。

11.如權利要求10所述的裝置，其特征在于，所述生成模塊，用于：

解碼所述結構光圖像中變形位置像素對應的相位信息；

將所述相位信息轉化為高度信息；

根據所述高度信息生成所述深度圖像。