[發明專利]圖像融合方法和裝置、存儲介質和電子裝置

在審

• 申請號: 202211336876.4
• 申請日: 2022-10-28
• 公開（公告）號: CN115587955A
• 公開（公告）日: 2023-01-10
• 發明（設計）人: 余彥;殷俊
• 申請（專利權）人: 浙江大華技術股份有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T3/40
• 代理公司: 北京康信知識產權代理有限責任公司 11240
• 代理人: 劉曉燕

1.一種圖像融合方法，其特征在于，包括：

對待融合的至少一個圖像分別進行多個方向的圖像變換，得到與所述至少一個圖像對應的低頻圖像組和高頻圖像組，其中，所述低頻圖像組包括各圖像分別對應的低頻圖像，所述高頻圖像組包括各圖像分別對應的高頻圖像；

按照預設尺寸分別對所述高頻圖像組中的圖像進行分塊處理，得到與所述高頻圖像組所對應的多個圖像塊對；

分別對所述多個圖像塊對中的每個圖像塊對內的圖像塊進行圖像塊融合，得到多個融合圖像塊，并對所述多個融合圖像塊進行圖像塊拼接，得到高頻融合圖像；

對所述低頻圖像組中的圖像進行圖像融合，得到低頻融合圖像；

對所述高頻融合圖像和所述低頻融合圖像進行圖像逆變換，得到所述至少一個圖像的融合圖像。

2.根據權利要求1所述的方法，其特征在于，所述對待融合的至少一個圖像分別進行多個方向的圖像變換，得到與所述至少一個圖像對應的低頻圖像組和高頻圖像組，包括：

對待融合的所述至少一個圖像分別進行一層四個方向的非下采樣輪廓波變換，得到所述低頻圖像組和所述高頻圖像組。

3.根據權利要求1所述的方法，其特征在于，所述分別對所述多個圖像塊對中的每個圖像塊對內的圖像塊進行圖像塊融合，得到多個融合圖像塊，包括：

將測量矩陣與所述每個圖像塊對中的圖像塊分別相乘，得到多個觀測圖像塊對，其中，所述測量矩陣的列數與所述每個圖像塊對中的圖像塊的行數相同；基于像素點的區域能量之間的匹配度對所述多個觀測圖像塊對中的每個觀測圖像塊對的像素點分別進行融合，得到多個融合測量圖像塊；

使用感知矩陣對所述多個融合測量圖像塊中的每個融合測量圖像塊進行重構，得到所述多個融合圖像塊，其中，所述感知矩陣是所述測量矩陣和與所述測量矩陣匹配的冗余字典相乘得到的。

4.根據權利要求3所述的方法，其特征在于，所述基于像素點的區域能量之間的匹配度對所述多個觀測圖像塊對中的每個觀測圖像塊對的像素點分別進行融合，得到多個融合測量圖像塊，包括：

將所述每個觀測圖像塊對分別作為當前觀測圖像塊對執行以下操作，得到所述多個融合測量圖像塊：

將所述當前觀測圖像塊對中的各像素點作為當前像素點分別執行以下融合操作：

確定所述當前觀測圖像塊對在所述當前像素點的區域能量之間的匹配度，得到當前匹配度；

在所述當前匹配度大于或者等于匹配度閾值的情況下，對所述當前觀測圖像塊對在所述當前像素點的像素值進行加權求和，得到與所述當前觀測圖像塊對所對應的融合測量圖像塊中的所述當前像素點的像素值；

在所述當前匹配度小于匹配度閾值的情況下，將目標觀測圖像塊在所述當前像素點的像素值，確定為與所述當前觀測圖像塊對所對應的融合測量圖像塊中的所述當前像素點的像素值，其中，所述目標觀測圖像塊為所述當前觀測圖像塊對中在所述當前像素點的區域能量最大的觀測圖像塊。

5.根據權利要求4所述的方法，其特征在于，在所述對所述當前觀測圖像塊對在所述當前像素點的像素值進行加權求和之前，所述方法還包括：

將第一差值與第二差值的比值與預設系數的乘積，確定為第一權值，將1與所述第一權值的差值，確定為第二權值，其中，所述第一差值為所述當前匹配度與所述匹配度閾值的差值，所述第二差值為1與所述匹配度閾值的差值，所述第一權值為所述當前觀測圖像塊對中對應的所述當前像素點的像素值最大的觀測圖像塊對應的加權系數，所述第二權值為所述當前觀測圖像塊對中對應的所述當前像素點的像素值最小的觀測圖像塊對應的加權系數。

6.根據權利要求3所述的方法，其特征在于，所述使用感知矩陣對所述多個融合測量圖像塊中的每個融合測量圖像塊進行重構，得到所述多個融合圖像塊，包括：

使用所述感知矩陣對所述每個融合測量圖像塊中的每一列分別執行以下重構操作，得到所述多個融合圖像塊，其中，在執行以下重構操作的過程中，所述每一列為當前列：

使用所述感知矩陣構造與所述當前列匹配的稀疏系數；

將所述稀疏系數與所述冗余字典相乘，得到與所述每個融合測量圖像塊對應的融合圖像塊中的所述當前列。