[發明專利]一種圖像融合方法及設備

在審

• 申請號: 201910407515.6
• 申請日: 2019-05-16
• 公開（公告）號: CN111951199A
• 公開（公告）日: 2020-11-17
• 發明（設計）人: 任世強
• 申請（專利權）人: 武漢TCL集團工業研究院有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06N3/04
• 代理公司: 深圳中一聯合知識產權代理有限公司 44414
• 代理人: 李艷麗

本發明適用于圖像處理技術領域，提供了一種圖像融合方法及設備，包括：獲取待處理的目標源圖像；所述目標源圖像包括同一場景對應的待處理的目標黑白源圖像和待處理的目標彩色源圖像；將所述目標源圖像輸入到預設的圖像融合模型進行處理，得到由所述目標黑白源圖像和所述目標彩色源圖像融合成的目標彩色圖像；在訓練過程中，所述圖像融合模型的輸入為所述樣本圖像組，所述圖像融合模型的輸出為由所述樣本黑白源圖像和所述樣本彩色源圖像融合成的彩色圖像。上述技術方案，通過端到端的神經網絡模型將黑白加彩色雙攝圖像融合得到增強后的融合圖像，無需進行像素級的精準對齊就可生成融合圖像，有效避免傳統融合方法存在的重影問題，實現良好的圖像融合效果。

技術領域

本發明屬于圖像處理技術領域，尤其涉及一種圖像融合方法及設備。

背景技術

自功能機時代開始，拍照就成為手機中的常用功能。隨著智能手機的普及，手機攝像頭的應用越來越廣泛，手機拍照功能也越發優異。優異的拍照性能已成為智能手機的一大賣點，圍繞拍照功能的技術創新層次不窮，光圈和傳感器尺寸也越來越大，這些技術和硬件的升級對手機拍照無論是照片質量還是整體體驗都有非常大的提升。在追求照片質量的同時，手機機身的輕薄化也是手機發展的一大趨勢，現有技術在手機上采用了雙攝像頭模組，提高了拍攝照片的質量同時也滿足了手機機身輕薄化的需求。

然而，直接使用雙攝像頭獲得的是兩張不同的圖像，因此，還需要利用圖像融合算法將兩張雙攝圖像進行融合，才能得到最終的雙攝增強圖像。現有的圖像融合是將多源信道所采集到的關于同一目標的圖像數據經過圖像處理計算機技術等，最大限度的提取各自信道中的有利信息，最后綜合成高質量的圖像，以提高圖像信息的利用率。當前圖像融合的前提條件是待融合的多源圖像已經逐像素精準對齊，以確保多源圖像逐像素對齊，即每個像素點對應的成像位置相同。

然而由于手機雙攝的特殊應用場景，雙攝圖像僅僅能夠進行整體的校準對齊，很難實現逐像素的精準對齊，這就導致傳統方法很難實現好的雙攝圖像融合效果，融合結果中易出現重影等問題，嚴重影響融合效果。

發明內容

有鑒于此，本發明實施例提供了一種圖像融合及設備，以解決現有技術中雙攝圖像融合效果差，融合結果中易出現重影的問題。

本發明實施例的第一方面提供了一種圖像融合方法，包括：

獲取待處理的目標源圖像；所述目標源圖像包括同一場景對應的待處理的目標黑白源圖像和待處理的目標彩色源圖像；

將所述目標源圖像輸入到預設的圖像融合模型進行處理，得到由所述目標黑白源圖像和所述目標彩色源圖像融合成的目標彩色圖像；其中，所述圖像融合模型由樣本圖像集訓練得到，所述樣本圖像集包括多個樣本圖像組，所述樣本圖像組包括同一場景對應的樣本黑白源圖像、樣本彩色源圖像和樣本彩色參照圖像，在訓練過程中，所述圖像融合模型的輸入為所述樣本圖像組，所述圖像融合模型的輸出為由所述樣本黑白源圖像和所述樣本彩色源圖像融合成的彩色圖像。

本發明實施例的第二方面提供了一種圖像融合裝置，包括：

第一獲取單元，用于獲取待處理的目標源圖像；所述目標源圖像包括同一場景對應的待處理的目標黑白源圖像和待處理的目標彩色源圖像；

處理單元，用于將所述目標源圖像輸入到預設的圖像融合模型進行處理，得到由所述目標黑白源圖像和所述目標彩色源圖像融合成的目標彩色圖像；其中，所述圖像融合模型由樣本圖像集訓練得到，所述樣本圖像集包括多個樣本圖像組，所述樣本圖像組包括同一場景對應的樣本黑白源圖像、樣本彩色源圖像和樣本彩色參照圖像，在訓練過程中，所述圖像融合模型的輸入為所述樣本圖像組，所述圖像融合模型的輸出為由所述樣本黑白源圖像和所述樣本彩色源圖像融合成的彩色圖像。

本發明實施例的第三方面提供了一種圖像融合設備，包括存儲器、處理器以及存儲在所述存儲器中并可在所述處理器上運行的計算機程序，所述處理器執行所述計算機程序時實現如上述第一方面所述的圖像融合方法的步驟。