[發(fā)明專利]雙傳感器攝像系統(tǒng)及其攝像方法

在審

• 申請?zhí)枺?/td>: 202011540274.1
• 申請日: 2020-12-23
• 公開（公告）號: CN114143443A
• 公開（公告）日: 2022-03-04
• 發(fā)明（設(shè)計）人: 彭詩淵;鄭書峻;黃旭鍊;李運錦;賴國銘
• 申請（專利權(quán)）人: 聚晶半導(dǎo)體股份有限公司
• 主分類號: H04N5/232
• 分類號: H04N5/232;H04N5/225;H04N5/265
• 代理公司: 北京同立鈞成知識產(chǎn)權(quán)代理有限公司 11205
• 代理人: 朱穎;黃健

1.一種雙傳感器攝像系統(tǒng)，包括：

至少一色彩傳感器；

至少一紅外線傳感器；

存儲裝置，存儲計算機程序；以及

處理器，耦接所述至少一色彩傳感器、所述至少一紅外光傳感器及所述存儲裝置，經(jīng)配置以加載并執(zhí)行所述計算機程序以：

識別所述雙傳感器攝像系統(tǒng)的一攝像場景；

控制所述至少一色彩傳感器及所述至少一紅外線傳感器采用適用于所述攝像場景下的多個曝光條件分別獲取多張色彩圖像及多張紅外線圖像；

適應(yīng)性選擇能顯露出所述攝像場景的細(xì)節(jié)的所述色彩圖像及所述紅外線圖像的組合；以及

融合所選擇的所述色彩圖像及所述紅外線圖像，以生成具備所述攝像場景的所述細(xì)節(jié)的場景圖像。

2.如權(quán)利要求1所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

控制所述至少一色彩傳感器及所述至少一紅外線傳感器中的至少一者采用標(biāo)準(zhǔn)曝光條件獲取所述攝像場景的至少一標(biāo)準(zhǔn)圖像，并使用所述至少一標(biāo)準(zhǔn)圖像識別所述場景。

3.如權(quán)利要求1所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

根據(jù)各所述色彩圖像的顏色細(xì)節(jié)，選擇所述色彩圖像其中之一作為基準(zhǔn)圖像；

識別所述基準(zhǔn)圖像中缺乏紋理細(xì)節(jié)的至少一缺陷區(qū)域；以及

根據(jù)各所述紅外線圖像中對應(yīng)于所述至少一缺陷區(qū)域的圖像的紋理細(xì)節(jié)，選擇所述紅外線圖像其中之一，并用以與所述基準(zhǔn)圖像進(jìn)行融合。

4.如權(quán)利要求3所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

選擇所述顏色細(xì)節(jié)最多的所述色彩圖像作為所述基準(zhǔn)圖像；以及

選擇對應(yīng)于所述至少一缺陷區(qū)域的圖像的所述紋理細(xì)節(jié)最多的所述紅外線圖像，并用以與所述基準(zhǔn)圖像進(jìn)行融合。

5.如權(quán)利要求3所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

將所述基準(zhǔn)圖像中的所述至少一缺陷區(qū)域的圖像的亮度分量以所述紅外線圖像中對應(yīng)于所述至少一缺陷區(qū)域的圖像取代，以生成補足所述至少一缺陷區(qū)域的所述紋理細(xì)節(jié)的所述場景圖像。

6.如權(quán)利要求3所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

對所選擇的所述紅外線圖像與所述基準(zhǔn)圖像進(jìn)行圖像融合，以生成補足所述缺陷區(qū)域的所述紋理細(xì)節(jié)的所述場景圖像。

7.如權(quán)利要求3所述的雙傳感器攝像系統(tǒng)，其中所述處理器還包括：

判斷各所述紅外線圖像是否包括所述至少一缺陷區(qū)域的所述紋理細(xì)節(jié)；以及

在所述紅外線圖像均未包括所述紋理細(xì)節(jié)時，控制所述至少一色彩傳感器采用較所述基準(zhǔn)圖像的曝光時間長或短的多個曝光時獲取多張色彩圖像并執(zhí)行高動態(tài)范圍處理，以生成具備所述至少一缺陷區(qū)域的所述紋理細(xì)節(jié)的所述場景圖像。

8.如權(quán)利要求3所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

將所選擇的所述色彩圖像的色彩空間由RGB色彩空間轉(zhuǎn)換至YUV色彩空間；

將轉(zhuǎn)換后所述色彩圖像的所述至少一缺陷區(qū)域的圖像的亮度分量以所選擇的所述紅外線圖像的對應(yīng)于所述至少一缺陷區(qū)域的圖像取代；以及

將取代后的所述色彩圖像的色彩空間轉(zhuǎn)換回所述RGB色彩空間，以生成所述場景圖像。

9.如權(quán)利要求1所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

將所選擇的所述色彩圖像的色彩空間由RGB色彩空間轉(zhuǎn)換至YUV色彩空間；

將轉(zhuǎn)換后所述色彩圖像的亮度分量以所選擇的所述紅外線圖像的亮度分量取代；以及

將取代后的所述色彩圖像的色彩空間轉(zhuǎn)換回所述RGB色彩空間，以生成所述場景圖像。

10.如權(quán)利要求1所述的雙傳感器攝像系統(tǒng)，其中所述處理器包括：

獲取所選擇的所述色彩圖像及所述紅外線圖像中的多個特征，并根據(jù)所獲取的所述特征之間的對應(yīng)關(guān)系對齊所述色彩圖像及所述紅外線圖像。