[發明專利]基于一致性約束非負稀疏表示的多聚焦圖像融合方法

有效

• 申請號: 201810086733.X
• 申請日: 2018-01-30
• 公開（公告）號: CN108510465B
• 公開（公告）日: 2019-12-24
• 發明（設計）人: 張強;汪星;曹運峰;史濤;韓軍功;王龍
• 申請（專利權）人: 西安電子科技大學
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T9/00
• 代理公司: 61205 陜西電子工業專利中心
• 代理人: 陳宏社;王品華

本發明提出了一種基于一致性約束非負稀疏表示的多聚焦圖像融合方法，用于解決現有技術中存在的融合圖像清晰度低和融合復雜度較高的技術問題。其實現步驟是：輸入經過配準的源圖像；構建源圖像的向量化矩陣；構建基于一致性約束的非負稀疏表示的稀疏編碼模型；利用具有自適應懲罰因子的線性迭代方向算法對一致性約束的非負稀疏表示的稀疏編碼模型進行求解，得到源圖像的非負稀疏表示系數；利用源圖像的非負稀疏表示系數構建圖像塊級標記矩陣；利用圖像塊級標記矩陣構建融合圖像。本發明能夠提高融合圖像的清晰度的同時降低融合復雜度，可用于環境監測，清晰圖像重建等領域。

技術領域

本發明屬于圖像處理技術領域，涉及一種多聚焦圖像融合方法，具體涉及一種基于一致性約束的非負稀疏表示的多聚焦圖像融合方法，可用于環境監測，清晰圖像重建等領域。

技術背景

圖像融合是指檢測并提取同一場景的兩幅或多幅源圖像的特征，經過特定的融合規則，將提取的輸入圖像的特征融合到一幅圖像中，得到的融合圖像同任一源圖像相比，增加了圖像的信息量，提高了圖像的清晰度，更加有利于全面、準確地獲取圖像中目標或場景信息，隨著各種成像傳感器的不斷涌現，圖像融合技術也得到了較快發展，圖像融合技術也越來越多的應用在計算機視覺、醫學成像與診斷、環境監測等相關領域。

多聚焦圖像融合是圖像融合的一個重要分支，通過多聚焦圖像融合，將源圖像中的聚焦區域提取出來，然后融合成一幅融合圖像，融合后的圖像與任一源圖像相比包含有更多的清晰區域，因此能夠更準確的描述被拍攝的場景。多聚焦圖像融合的重點和難點在于對源圖像聚焦區域完整一致地提取。

由于稀疏表示理論在圖像去燥，圖像分類和人臉識別領域的良好表現，很多研究學者將稀疏表示理論應用在圖像融合領域。“B.Yang,S.Li,Multi-focus image fusionand restoration with sparse representation,IEEE Transactions onInstrumentation and Measurement,vol.59,no.4,pp.884-892,2010.”最早將稀疏表示模型(SR)應用在多聚焦圖像融合領域，公開了一種基于稀疏表示的多聚焦圖像融合方法，該方法首先利用滑動窗口技術將源圖像分為重疊的子圖像塊，子圖像塊的大小與滑動窗的大小相等，然后將子圖像塊按照字典語義順序拉成列向量，得到源圖像的向量化矩陣，然后利用稀疏表示模型和DCT字典對源圖像的向量化矩陣進行稀疏編碼，得到源圖像的稀疏表示系數，最后將稀疏表示系數的l₁-范數定義為聚焦衡量指標，并利用“取大”的融合規則構建最終的融合圖像。然而，該融合方法由于在源圖像的稀疏編碼過程中僅僅對源圖像的稀疏表示系數進行稀疏約束，導致源圖像的稀疏表示系數中既存在正數也存在負數，負數的存在使得對源圖像重構的過程中圖像特征之間會出現抵消，導致對源圖像特征提取的不完整，使得最終的融合圖像的清晰度降低。針對這種問題“J.Wang,J.Peng,et al.,Fusionmethod for infrared and visible images by using non-negative sparserepresentation,Infrared Physics&Technology,67(2014)477-489.”公開了一種基于非負稀疏表示模型(NNSR)的紅外與可見光圖像融合方法，該方法首先利用滑動窗口技術將源圖像分為重疊的子圖像塊，子圖像塊的大小與滑動窗的大小相等，然后將子圖像塊按照字典語義順序拉成列向量，得到源圖像的向量化矩陣，然后利用非負稀疏表示模型對源圖像的向量化矩陣進行稀疏編碼，得到源圖像的非負稀疏表示系數，然后利用源圖像的非負稀疏表示系數以及對應的融合規則構建最終的融合圖像，不同于基于稀疏表示模型的融合方法中只對稀疏表示系數進行稀疏約束，該融合方法中利用非負稀疏表示模型對源圖像進行稀疏編碼，對稀疏表示系數增加稀疏和非負約束，非負約束與輸入圖像數據的非負特性十分吻合，因而，該融合方法能夠更好地提取源圖像中的特征。