[發明專利]一種圖像融合方法、裝置、圖像處理設備及雙目系統

在審

• 申請號: 202011601689.5
• 申請日: 2020-12-30
• 公開（公告）號: CN112614164A
• 公開（公告）日: 2021-04-06
• 發明（設計）人: 金益如;張浩;唐杰;潘永友
• 申請（專利權）人: 杭州海康微影傳感科技有限公司
• 主分類號: G06T7/30
• 分類號: G06T7/30;G06T5/50
• 代理公司: 北京柏杉松知識產權代理事務所(普通合伙) 11413
• 代理人: 丁蕓;馬敬

1.一種圖像融合方法，其特征在于，所述方法包括：

獲取待融合的可見光圖像和熱成像圖像；

利用預先獲得的配準變換參數，對所述可見光圖像和所述熱成像圖像進行配準變換，其中，所述配準變換是指以一個圖像為基準，對另一個圖像進行的變換操作；

根據配準變換后的可見光圖像和熱成像圖像中同一位置的像素點在所述配準變換后的可見光圖像和熱成像圖像中的亮度值，以及預先設置的亮度融合策略，確定相應位置的融合像素點的融合亮度值；

根據各位置的融合像素點的融合亮度值，以及預先設置的亮度值與色彩值的對應關系，分別確定各所述融合像素點的色彩值，并基于所述融合像素點的色彩值，得到融合圖像。

2.根據權利要求1所述的方法，其特征在于，所述配準變換參數的獲得方式，包括：

獲取至少三個指定目標在可見光圖像中的各第一坐標及在熱成像圖像中的各第二坐標；

根據各第一坐標和各第二坐標，利用預先設置的坐標變換模型，計算得到配準變換參數。

3.根據權利要求2所述的方法，其特征在于，所述獲取至少三個指定目標在可見光圖像中的各第一坐標及在熱成像圖像中的各第二坐標，包括：

獲取指定目標位于至少三個不同指定位置時的各可見光圖像和各熱成像圖像，其中，采集各可見光圖像的可見光鏡頭和采集各熱成像圖像的熱成像鏡頭之間的相對位置不變；

確定所述指定目標在各可見光圖像中的第一坐標和在各熱成像圖像中的第二坐標。

4.根據權利要求1所述的方法，其特征在于，所述根據配準變換后的可見光圖像和熱成像圖像中同一位置的像素點在所述配準變換后的可見光圖像和熱成像圖像中的亮度值，以及預先設置的亮度融合策略，確定相應位置的融合像素點的融合亮度值的步驟，包括：

根據配準變換后的可見光圖像和熱成像圖像中同一位置的像素點在所述配準變換后的可見光圖像和熱成像圖像中的亮度值，按照第一預設映射關系，確定相應位置的融合像素點的融合亮度值，其中，所述第一預設映射關系為同一位置的像素點在所述可見光圖像中的亮度值和在所述熱成像圖像中的亮度值與融合亮度值的對應關系。

5.根據權利要求4所述的方法，其特征在于，所述第一預設映射關系中記錄的融合亮度值是根據基于預設的權重模型計算得到的權重系數，對同一位置的像素點在所述可見光圖像中的亮度值和在所述熱成像圖像中的亮度值進行加權得到，其中，所述權重模型基于所述可見光圖像和所述熱成像圖像的亮度值大小關系設置。

6.根據權利要求1所述的方法，其特征在于，所述根據各位置的融合像素點的融合亮度值，以及預先設置的亮度值與色彩值的對應關系，分別確定各所述融合像素點的色彩值的步驟，包括：

針對任一位置的融合像素點，基于該位置的融合像素點的融合亮度值，按照第二預設映射關系，確定該融合像素點的色彩值，其中，所述第二預設映射關系為融合亮度值與色彩值的一一對應關系。

7.一種圖像融合裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取待融合的可見光圖像和熱成像圖像；

配準模塊，用于利用預先獲得的配準變換參數，對所述可見光圖像和所述熱成像圖像進行配準變換，其中，所述配準變換是指以一個圖像為基準，對另一個圖像進行的變換操作；

融合模塊，用于根據配準變換后的可見光圖像和熱成像圖像中同一位置的像素點在所述配準變換后的可見光圖像和熱成像圖像中的亮度值，以及預先設置的亮度融合策略，確定各位置的融合像素點的融合亮度值；

色彩映射模塊，用于根據各位置的融合像素點的融合亮度值，以及預先設置的亮度值與色彩值的對應關系，分別確定各所述融合像素點的色彩值，并基于所述融合像素點的色彩值，得到融合圖像。

8.根據權利要求7所述的裝置，其特征在于，所述裝置還包括：

坐標獲取模塊，用于獲取至少三個指定目標在可見光圖像中的各第一坐標及在熱成像圖像中的各第二坐標；

參數獲得模塊，用根據各第一坐標和各第二坐標，利用預先設置的坐標變換模型，計算得到配準變換參數。