[發明專利]圖像處理裝置以及圖像處理方法

有效

• 申請號: 201410138822.6
• 申請日: 2014-04-08
• 公開（公告）號: CN104104937B
• 公開（公告）日: 2017-09-05
• 發明（設計）人: 上森丈士
• 申請（專利權）人: 索尼公司
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N13/02
• 代理公司: 北京康信知識產權代理有限責任公司11240
• 代理人: 余剛,吳孟秋

1.一種圖像處理裝置，包括：

關注區域檢測單元，所述關注區域檢測單元被配置為從基準圖像檢測出包括期望對象的關注區域；

亮度視差轉換單元，所述亮度視差轉換單元被配置為基于通過使用過去幀估計的亮度視差轉換特性來對所述關注區域執行亮度視差轉換，其中，過去幀的亮度視差轉換特性是指過去幀的視差值與亮度值之間的比例關系；以及

視差估計單元，所述視差估計單元被配置為基于所述基準圖像和參考圖像進行視差估計，并且通過使用由所述亮度視差轉換單元獲得的亮度視差轉換結果在所述關注區域中進行所述視差估計，所述參考圖像的視點位置不同于所述基準圖像的視點位置。

2.根據權利要求1所述的圖像處理裝置，其中：

所述亮度視差轉換單元通過使用所述關注區域的亮度值來執行所述亮度視差轉換，所述關注區域的所述亮度值根據到所述期望對象的深度距離進行了校正。

3.根據權利要求2所述的圖像處理裝置，其中：

假設在所述亮度視差轉換特性的估計中根據所述深度距離校正的所述亮度值的平方根與視差值成比例，所述亮度視差轉換單元估計比例系數和截距。

4.根據權利要求3所述的圖像處理裝置，其中：

所述亮度視差轉換單元基于所述過去幀的關注區域中的最大亮度值、最小亮度值、最大視差值以及最小視差值對所述亮度視差轉換特性進行估計。

5.根據權利要求4所述的圖像處理裝置，其中：

所述亮度視差轉換單元基于所述關注區域中的所述亮度值的分布和所述亮度值的平均值來計算所述最大亮度值和所述最小亮度值，并且基于所述關注區域中的所述視差值的分布和所述視差值的平均值來計算所述最大視差值和所述最小視差值。

6.根據權利要求1所述的圖像處理裝置，其中：

所述視差估計單元為所述基準圖像的每個視差估計目標位置設置第一匹配區域；針對預先指定的每個像差值，計算表示所述第一匹配區域與所述參考圖像中的對應于該像差值的第二匹配區域之間的相似性的成本值，并且針對每一行將使行的成本值的總和為最小的具有最高相似性的視差值設定為視差估計結果。

7.根據權利要求6所述的圖像處理裝置，其中：

在由所述關注區域檢測單元所檢測的所述關注區域中，所述視差估計單元使所述成本值包含對應于所指定的視差值與通過所述亮度視差轉換單元進行亮度視差轉換獲得的視差值之間的差值的成本值。

8.根據權利要求7所述的圖像處理裝置，其中：

在除所述關注區域檢測單元所檢測到的關注區域之外的區域中，所述視差估計單元在沒有獲得所述差值的情況下對所述成本值進行計算。

9.根據權利要求6所述的圖像處理裝置，其中：

所述視差估計單元使對應于所述基準圖像中所述視差估計目標位置的視差值與緊前的視差估計目標位置的視差值之間的差的成本值包括在指示所述第一匹配區域與所述第二匹配區域之間的相似性的成本值中。

10.根據權利要求1所述的圖像處理裝置，其中：

所述視差估計單元在所述視差估計中使用動態編程。

11.根據權利要求1所述的圖像處理裝置，其中：

所述關注區域檢測單元將所述基準圖像的色差值和亮度值與預定閾值比較，以檢測所述關注區域。

12.根據權利要求1所述的圖像處理裝置，其中：

所述關注區域檢測單元對所述基準圖像執行紋理分析，以檢測所述關注區域。

13.一種圖像處理方法，包括：

從基準圖像中檢測出包括期望對象的關注區域；

基于通過使用過去幀估計的亮度視差轉換特性來對所述關注區域執行亮度視差轉換，其中，過去幀的亮度視差轉換特性是指過去幀的視差值與亮度值之間的比例關系；以及

基于所述基準圖像和參考圖像來進行視差估計，并且通過使用亮度視差轉換結果在所述關注區域中進行所述視差估計，所述參考圖像的視點位置不同于所述基準圖像的視點位置。

14.根據權利要求13所述的圖像處理方法，其中：

通過使用所述關注區域的亮度值來執行所述亮度視差轉換，所述關注區域的所述亮度值根據到所述期望對象的深度距離進行了校正。

15.一種圖像處理系統，包括：

圖像攝取裝置，用于產生具有不同視點位置的多個拍攝圖像的圖像信號并且將所述圖像信號中的一個作為基準圖像提供給圖像處理裝置：

所述圖像處理裝置，包括：

關注區域檢測單元，所述關注區域檢測單元被配置為從基準圖像檢測出包括期望對象的關注區域；

亮度視差轉換單元，所述亮度視差轉換單元被配置為基于通過使用過去幀估計的亮度視差轉換特性來對所述關注區域執行亮度視差轉換，其中，過去幀的亮度視差轉換特性是指過去幀的視差值與亮度值之間的比例關系；以及

視差估計單元，所述視差估計單元被配置為基于所述基準圖像和參考圖像進行視差估計，并且通過使用由所述亮度視差轉換單元獲得的亮度視差轉換結果在所述關注區域中進行所述視差估計，所述參考圖像的視點位置不同于所述基準圖像的視點位置。