[發明專利]基于特征引導的紅外與可見光的圖像信息融合方法及裝置

在審

• 申請號: 201911329285.2
• 申請日: 2019-12-20
• 公開（公告）號: CN111179209A
• 公開（公告）日: 2020-05-19
• 發明（設計）人: 錢琨;楊俊彥;余躍;逄浩君
• 申請（專利權）人: 上海航天控制技術研究所
• 主分類號: G06T5/50
• 分類號: G06T5/50
• 代理公司: 中國航天科技專利中心 11009
• 代理人: 李明澤

1.一種基于特征引導的紅外與可見光的圖像信息融合方法，其特征在于，包括：

獲取目標對象對應的原始紅外圖像和原始可見光圖像；

對所述原始紅外圖像進行拆分，生成多個目標圖像子塊；

根據所述多個目標圖像子塊進行圖像背景估計，生成所述目標對象對應的紅外背景圖像；

根據所述原始紅外圖像和所述紅外背景圖像，確定目標圖像；

根據所述原始可見光圖像和所述原始紅外圖像，確定前景圖像；

基于所述目標圖像、所述前景圖像和所述原始可見光圖像中的可見光信息，確定最終的融合結果。

2.根據權利要求1所述的方法，其特征在于，所述對所述原始紅外圖像進行拆分，生成多個目標圖像子塊，包括：

采用四叉樹分塊方法對所述原始紅外圖像進行分塊處理，得到多個圖像子塊；

獲取每個所述圖像子塊的最大灰度值和最小灰度值；

計算各所述最大灰度值和各所述最小灰度值之間的差值，得到每個所述圖像子塊對應的灰度值差值；

在每個所述圖像子塊對應的灰度值差值大于設定閾值時，停止分割，將多個所述圖像子塊作為所述目標圖像子塊；

在各所述灰度值差值中存在小于或等于所述設定閾值的圖像子塊時，對灰度值差值小于或等于所述設定閾值的圖像子塊進行二次分割處理，并將得到的所有的灰度值差值小于或等于所述設定閾值的圖像子塊作為所述目標圖像子塊。

3.根據權利要求1所述的方法，其特征在于，所述根據所述多個目標圖像子塊進行圖像背景估計，生成所述目標對象對應的紅外背景圖像，包括：

獲取每個所述目標圖像子塊中的16個控制點；

根據所述16個控制點和預設函數，獲取插值后的背景圖像；

對所述背景圖像進行高斯平滑處理，生成所述紅外背景圖像。

4.根據權利要求1所述的方法，其特征在于，所述根據所述原始紅外圖像和所述紅外背景圖像，確定目標圖像，包括：

對所述原始紅外圖像和所述紅外背景圖像進行作差處理，生成所述目標圖像。

5.根據權利要求1所述的方法，其特征在于，所述根據所述原始可見光圖像和所述原始紅外圖像，確定前景圖像，包括：

對所述原始可見光圖像和所述原始紅外圖像進行作差處理，生成所述前景圖像。

6.根據權利要求1所述的方法，其特征在于，所述基于所述目標圖像、所述前景圖像和所述原始可見光圖像中的可見光信息，確定最終的融合結果，包括：

根據所述目標圖像對所述前景圖像進行濾波處理，獲取濾波增強結果；

將所述濾波增強結果融合所述可見光信息，獲取所述融合結果。

7.一種基于特征引導的紅外與可見光的圖像信息融合裝置，其特征在于，包括：

紅外可見光圖像獲取模塊，用于獲取目標對象對應的原始紅外圖像和原始可見光圖像；

目標圖像子塊生成模塊，用于對所述原始紅外圖像進行拆分，生成多個目標圖像子塊；

紅外背景圖像生成模塊，用于根據所述多個目標圖像子塊進行圖像背景估計，生成所述目標對象對應的紅外背景圖像；

目標圖像確定模塊，用于根據所述原始紅外圖像和所述紅外背景圖像，確定目標圖像；

前景圖像確定模塊，用于根據所述原始可見光圖像和所述原始紅外圖像，確定前景圖像；

融合結果確定模塊，用于基于所述目標圖像、所述前景圖像和所述原始可見光圖像中的可見光信息，確定最終的融合結果。