[發(fā)明專利]攝像設(shè)備、圖像融合方法、裝置和存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 201910408080.7
• 申請日: 2019-05-15
• 公開（公告）號: CN111951200A
• 公開（公告）日: 2020-11-17
• 發(fā)明（設(shè)計）人: 唐超影;謝建磊
• 申請（專利權(quán)）人: 杭州海康威視數(shù)字技術(shù)股份有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;H04N5/232;H04N5/235
• 代理公司: 北京三高永信知識產(chǎn)權(quán)代理有限責(zé)任公司 11138
• 代理人: 李珂珂

1.一種攝像設(shè)備，其特征在于，所述攝像設(shè)備包括：圖像采集模塊、第一圖像處理模塊和雙光融合網(wǎng)絡(luò)模塊；

所述圖像采集模塊的輸出端與所述第一圖像處理模塊的輸入端連接，所述第一圖像處理模塊的輸出端與所述雙光融合網(wǎng)絡(luò)模塊的輸入端連接；

所述圖像采集模塊，用于采集第一原始圖像和第二原始圖像，將所述第一原始圖像和所述第二原始圖像傳輸給所述第一圖像處理模塊；

所述第一圖像處理模塊，用于接收所述第一原始圖像和所述第二原始圖像，對所述第一原始圖像和所述第二原始圖像進行預(yù)處理，得到第一預(yù)處理圖像和第二預(yù)處理圖像，將所述第一預(yù)處理圖像和所述第二預(yù)處理圖像輸入至所述雙光融合網(wǎng)絡(luò)模塊；

所述雙光融合網(wǎng)絡(luò)模塊，用于接收所述第一圖像處理模塊輸出的所述第一預(yù)處理圖像和所述第二預(yù)處理圖像，對所述第一預(yù)處理圖像和所述第二預(yù)處理圖像進行雙光融合，得到融合圖像。

2.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，所述圖像采集模塊包括：分光單元、第一傳感器和第二傳感器；

所述分光單元的輸出端分別與所述第一傳感器和所述第二傳感器的輸入端連接，所述第一傳感器和所述第二傳感器的輸出端分別與所述第一圖像處理模塊的輸入端連接；

所述分光單元，用于采集當前場景的入射光，將采集到的入射光分為紅外光和可見光兩路，將分光后的一路光輸入至所述第一傳感器，將另一路光輸入至第二傳感器；

所述第一傳感器，用于接收所述分光單元輸出的一路光，根據(jù)所述一路光生成第一原始圖像，將所述第一原始圖像傳輸給所述第一圖像處理模塊；

所述第二傳感器，用于接收所述分光單元輸出的另一路光，根據(jù)所述另一路光生成第二原始圖像，將所述第二原始圖像傳輸給所述第一圖像處理模塊。

3.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，所述第一圖像處理模塊包括：配準單元和預(yù)處理單元；

所述配準單元的輸入端與所述圖像采集模塊的輸出端連接，所述配準單元的輸出端與所述預(yù)處理單元的輸入端連接，所述預(yù)處理單元的輸出端與所述雙光融合網(wǎng)絡(luò)模塊連接；

所述配準單元，用于將所述第一原始圖像和所述第二原始圖像的像素點進行配準，將配準后的第一原始圖像和第二原始圖像傳輸給所述預(yù)處理單元；

所述預(yù)處理單元，用于接收所述配準單元傳輸?shù)呐錅屎蟮牡谝辉紙D像和第二原始圖像；

所述預(yù)處理單元，還用于以配準后的第二原始圖像作為參考，將所述第一原始圖像的圖像信息融合到所述第二原始圖像中，得到所述第一預(yù)處理圖像，將所述第一原始圖像作為第二預(yù)處理圖像；或者，以配準后的第一原始圖像作為參考，將所述第二原始圖像的圖像信息融合到所述第一原始圖像中，得到所述第二預(yù)處理圖像，將所述第二原始圖像作為第一預(yù)處理圖像；或者，以配準后的第二原始圖像作為參考，將所述第一原始圖像的圖像信息融合到所述第二原始圖像中，得到所述第一預(yù)處理圖像，以配準后的第一原始圖像作為參考，將所述第二原始圖像的圖像信息融合到所述第一原始圖像中，得到所述第二預(yù)處理圖像；

所述預(yù)處理單元，還用于將所述第一預(yù)處理圖像和所述第二預(yù)處理圖像發(fā)送給所述雙光融合網(wǎng)絡(luò)模塊。

4.根據(jù)權(quán)利要求1所述的攝像設(shè)備，其特征在于，

所述第一圖像處理模塊，還用于根據(jù)融合權(quán)重對所述第一原始圖像和所述第二原始圖像的像素點進行預(yù)處理，得到所述第一預(yù)處理圖像和所述第二預(yù)處理圖像；或者，

所述第一圖像處理模塊，還用于確定所述第一原始圖像和所述第二原始圖像中的系數(shù)最高的高頻成分，根據(jù)所述系數(shù)最高的高頻成分對所述第一原始圖像和所述第二原始圖像進行預(yù)處理，得到所述第一預(yù)處理圖像和所述第二預(yù)處理圖像；或者，

所述第一圖像處理模塊，還用于分別確定所述第一原始圖像和所述第二原始圖像的高頻成分，根據(jù)所述第一原始圖像的高頻成分和所述第二原始圖像的高頻成分對所述第一原始圖像和所述第二原始圖像進行預(yù)處理，得到所述第一預(yù)處理圖像和所述第二預(yù)處理圖像。