[發明專利]攝像機模塊及其超分辨率圖像處理方法

有效

• 申請號: 201980028015.X
• 申請日: 2019-02-21
• 公開（公告）號: CN112020853B
• 公開（公告）日: 2022-11-08
• 發明（設計）人: 李昌奕;金大根;金碩賢
• 申請（專利權）人: LG伊諾特有限公司
• 主分類號: H04N5/225
• 分類號: H04N5/225;G06T7/55
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 陳煒;李德山

1.一種攝像機模塊，包括：

圖像獲取單元，其被配置成獲取多個圖像幀，在所述多個圖像幀之間具有空間相位差；

圖像生成單元，其被配置成使用所述多個圖像幀來生成具有比所述多個圖像幀中的每一個的分辨率高的分辨率的圖像數據；以及

深度信息提取單元，其被配置成使用所述圖像數據來提取關于對象的深度信息，

其中，所述圖像獲取單元包括：

光學單元，其被配置成改變所述對象的光行進所沿的路徑；

圖像傳感器，其被配置成感測沿不同路徑入射的光；以及

控制器，其被配置成控制所述光學單元和所述圖像傳感器，以及

其中，所述多個圖像幀對應于由所述圖像傳感器順序地感測的結果，

其中，所述圖像生成單元使用以下關于所述多個圖像幀的每幀而獲得的強度生成所述圖像數據：

其中，x_φ表示關于所述多個圖像幀的每幀獲得的強度，1≤k≤p，p表示用于生成所述圖像數據的所述圖像幀的數目，φ表示相位延遲的程度，D^-1表示D的逆矩陣，D表示所述圖像傳感器的像素的尺寸，B_k^-1表示B_k的逆矩陣，B_k表示關于所述深度信息的光學特性，n_k表示p個圖像幀中的第k圖像幀的噪聲分量，并且A_k表示p個圖像幀中的第k個圖像幀的強度，并且A_k如下所示：

A_k＝DB_kx_φ+n_k。

2.根據權利要求1所述的攝像機模塊，其中，所述圖像獲取單元包括：

多個光學單元，其分別具有所述對象的光行進所沿的不同路徑；以及

多個圖像傳感器，其被配置成感測通過所述多個光學單元入射的光，以及

其中，所述多個圖像幀對應于由所述多個圖像傳感器感測的結果。

3.根據權利要求1所述的攝像機模塊，其中，所述深度信息提取單元如下計算所述深度信息：

其中，x表示深度信息，c表示光通量，并且f表示頻率。

4.根據權利要求1所述的攝像機模塊，其中，所述多個圖像幀之間具有與比像素間隔小的間隔相對應的空間相位差。

5.根據權利要求1所述的攝像機模塊，其中，所述圖像生成單元通過合成所述多個圖像幀中的一些圖像幀來生成第一超分辨率圖像幀，并且通過合成所述多個圖像幀中的其余圖像幀來生成第二超分辨率圖像幀。

6.根據權利要求5所述的攝像機模塊，其中，所述圖像生成單元通過根據各個像素的位置簡單地合并所述多個圖像幀中的一些圖像幀來生成所述第一超分辨率圖像幀，并且通過根據各個像素的位置簡單地合并所述多個圖像幀中的其余圖像幀來生成所述第二超分辨率圖像幀。

7.根據權利要求3所述的攝像機模塊，其中，所述控制器改變光從所述光學單元行進所沿的路徑，使得由所述圖像傳感器順序地感測并輸出的所述多個圖像幀之間具有與比像素間隔小的間隔相對應的空間相位差。