[發明專利]去除圖像中鏡片反光的圖像處理方法、裝置和終端設備

有效

• 申請號: 201810179783.2
• 申請日: 2018-03-05
• 公開（公告）號: CN108564540B
• 公開（公告）日: 2020-07-17
• 發明（設計）人: 黃海東
• 申請（專利權）人: OPPO廣東移動通信有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06K9/00
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙) 11201
• 代理人: 張潤

本申請公開了一種去除圖像中鏡片反光的圖像處理方法、裝置和終端設備，其中，去除圖像中鏡片反光的圖像處理方法包括：生成彩色圖像和深度圖像；基于人臉識別算法，從彩色圖像中提取出人臉區域；根據彩色圖像和深度圖像確定人臉區域中的反光區域；以及對反光區域進行圖像修正處理。本申請實施例的去除圖像中鏡片反光的圖像處理方法、裝置和終端設備，通過生成彩色圖像和深度圖像，并基于人臉識別算法，從彩色圖像中提取出人臉區域，以及根據彩色圖像和深度圖像確定人臉區域中的反光區域，并對反光區域進行圖像修正處理，能夠準確地識別出反光區域，并去除反光區域中的反光，提高圖像效果。

技術領域

本申請涉及信息處理技術領域，尤其涉及一種去除圖像中鏡片反光的圖像處理方法、裝置和終端設備。

背景技術

隨著科技的不斷進步，手機的照相功能越發強大，攝像頭的像素數也越來越高，圖像越來越清晰。人們可以使用手機隨時隨地的拍照。但是，在人像拍照成像的過程中，眼鏡的反光造成的眼部細節丟失一直是難以解決的問題。目前，去除反光技術可包括兩類方法，一是在拍照前進行預處理，例如加裝偏振片或調整光源、鏡片的角度，甚至分別拍攝戴眼鏡和不戴眼鏡的照片進行合成；二是拍照成像之后，通過后期圖像處理去除反光，例如提取圖片眼睛區域的藍色通道與其他通道進行差分處理，消除藍色反光。第一類方法會讓拍攝過程變復雜，而且加裝偏振片會降低成像質量。第二類方法難以準確獲得正確的眼部區域，由于眼鏡反射光斑具有復雜性，光斑的大小、顏色、分布都難以預測，后期處理效率低，成本高。

申請內容

本申請提供一種去除圖像中鏡片反光的圖像處理方法、裝置和終端設備，以解決現有技術中，拍攝人像時眼鏡鏡片產生反光造成的眼部細節丟失的問題。

本申請實施例提供一種去除圖像中鏡片反光的圖像處理方法，包括：生成彩色圖像和深度圖像；

基于人臉識別算法，從所述彩色圖像中提取出人臉區域；

根據所述彩色圖像和所述深度圖像確定所述人臉區域中的反光區域；以及

對所述反光區域進行圖像修正處理。

可選的，生成彩色圖像和深度圖像，包括：

通過圖像傳感器捕獲攝像頭所拍攝的彩色圖像；

通過結構光傳感器獲取利用結構光生成的深度圖像。

可選的，根據所述彩色圖像和所述深度圖像確定所述人臉區域中的反光區域，包括：

獲取生成所述深度圖像時結構光的強度信息，并根據所述強度信息確定鏡片區域；

根據所述深度圖像從所述鏡片區域中獲取人眼區域；

根據所述鏡片區域和所述人眼區域確定所述鏡片區域中的非人眼區域；

對所述非人眼區域進行高光檢測，確定反光區域。

可選的，通過結構光傳感器獲取利用結構光生成的深度圖像，包括：

通過結構光投射器向人臉投射結構光，并通過所述結構光傳感器獲取經過所述人臉的結構光圖像；

對所述結構光圖像進行解碼處理，以生成所述深度圖像。

可選的，對所述結構光圖像進行解碼處理，以生成所述深度圖像，包括：

解碼所述結構光圖像中變形位置像素對應的相位信息；

將所述相位信息轉化為高度信息；

根據所述高度信息生成所述深度圖像。

可選的，對所述反光區域進行圖像修正處理，包括：

獲取所述人臉區域的皮膚特征信息；