[發明專利]一種圖像融合方法、裝置、圖像處理設備及雙目系統

在審

• 申請號: 202011601689.5
• 申請日: 2020-12-30
• 公開（公告）號: CN112614164A
• 公開（公告）日: 2021-04-06
• 發明（設計）人: 金益如;張浩;唐杰;潘永友
• 申請（專利權）人: 杭州海康微影傳感科技有限公司
• 主分類號: G06T7/30
• 分類號: G06T7/30;G06T5/50
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 丁蕓;馬敬

本發明實施例提供了一種圖像融合方法、裝置、圖像處理設備及雙目系統，通過對可見光圖像和熱成像圖像進行配準變換，自動根據配準變換后的可見光圖像和熱成像圖像中的像素點亮度值獲得融合亮度值，再根據每個像素點的融合亮度值確定出每個像素點的色彩值，獲得能夠適應不同環境亮度的融合圖像，從而提高了可見光圖像與熱成像圖像的融合效果。

技術領域

本發明涉及圖像處理技術領域，特別是涉及一種圖像融合方法、裝置、圖像處理設備及雙目系統。

背景技術

可見光圖像是圖像采集設備依據目標物體的光線反射所采集的圖像，熱成像圖像是圖像采集設備依據目標物體自身的輻射所采集的圖像。可見光圖像中含有豐富的細節信息，但易受照明條件、天氣等因素影響，尤其在目標物體與背景色度差異較小的情況下，很難區分出目標物體。熱成像圖像中主要體現的是目標物體的熱量信息，能夠很好地顯示的具有熱量的目標物體，受照明條件與惡劣天氣的影響較小，但是由于受成像原理的限制，熱成像圖像的對比度較低，目標物體的細節信息較差。將熱成像圖像與可見光圖像進行融合，可以很好地彌補兩種圖像的不足，具有非常高的應用價值。

相應技術中，可見光圖像和熱成像圖像的融合包括兩種方案，一種是將可見光高頻分量與熱成像低頻分量進行疊加，獲得融合結果；一種是將可見光圖像和熱成像圖像中的低頻分量進行加權求和得到低頻融合分量，然后將低頻融合分量與高頻分量進行疊加，獲得最終的融合結果。

然而，低頻分量和高頻分量均易受環境亮度影響，導致上述方案得到的融合結果在不同亮度環境下的效果差異較大。

發明內容

本發明實施例的目的在于提供一種圖像融合方法、裝置、圖像處理設備及雙目系統，以提高可見光圖像與熱成像圖像的融合效果。具體技術方案如下：

第一方面，本發明實施例提供了一種圖像融合方法，該方法包括：

獲取待融合的可見光圖像和熱成像圖像；

利用預先獲得的配準變換參數，對可見光圖像和熱成像圖像進行配準變換，其中，配準變換是指以一個圖像為基準，對另一個圖像進行的變換操作；

根據配準變換后的可見光圖像和熱成像圖像中同一位置的像素點在所述配準變換后的可見光圖像和熱成像圖像中的亮度值，以及預先設置的亮度融合策略，確定各位置的融合像素點的融合亮度值；

根據各位置的融合像素點的融合亮度值，以及預先設置的亮度值與色彩值的對應關系，分別確定各所述融合像素點的色彩值，并基于所述融合像素點的色彩值，得到融合圖像。

在一種可能的實施方式中，所述配準變換參數的獲得方式，包括：

獲取至少三個指定目標在可見光圖像中的各第一坐標及在熱成像圖像中的各第二坐標；

根據各第一坐標和各第二坐標，利用預先設置的坐標變換模型，計算得到配準變換參數。

在一種可能的實施方式中，所述獲取至少三個指定目標在可見光圖像中的各第一坐標及在熱成像圖像中的各第二坐標，包括：

獲取指定目標位于至少三個不同指定位置時的各可見光圖像和各熱成像圖像，其中，采集各可見光圖像的可見光鏡頭和采集各熱成像圖像的熱成像鏡頭之間的相對位置不變；

確定所述指定目標在各可見光圖像中的第一坐標和在各熱成像圖像中的第二坐標。

在一種可能的實施方式中，所述根據配準變換后的可見光圖像和熱成像圖像中同一位置的像素點在所述配準變換后的可見光圖像和熱成像圖像中的亮度值，以及預先設置的亮度融合策略，確定相應位置的融合像素點的融合亮度值的步驟，包括：