[發(fā)明專利]可見光圖像和紅外圖像融合方法、設(shè)備及可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 202110003609.4
• 申請日: 2021-01-04
• 公開（公告）號: CN112767291A
• 公開（公告）日: 2021-05-07
• 發(fā)明（設(shè)計）人: 陳虹宇;俞克強;王松;張東;劉曉沐;楊志強
• 申請（專利權(quán)）人: 浙江大華技術(shù)股份有限公司
• 主分類號: G06T5/50
• 分類號: G06T5/50;G06T7/11;G06T7/33;G06T7/90
• 代理公司: 深圳市威世博知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44280
• 代理人: 黎堅怡

本發(fā)明公開了一種可見光圖像與紅外圖像融合方法，該可見光圖像與紅外圖像融合方法包括：獲取可見光圖像和紅外圖像，可見光圖像包括可見光亮度圖像和可見光色彩圖像，紅外圖像包括紅外亮度圖像和紅外偽彩圖像；對紅外偽彩圖像/可見光色彩圖像進行區(qū)域劃分，分別融合各區(qū)域的紅外偽彩圖像與可見光色彩圖像，將各區(qū)域融合后的色彩圖像進行合并得到色彩融合圖像；融合可見光亮度圖像和紅外亮度圖像，得到亮度融合圖像；合并色彩融合圖像和亮度融合圖像得到可見光?紅外融合圖像。通過上述方式，本發(fā)明能夠充分利用可見光圖像信息和紅外圖像信息。

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，特別是涉及可見光圖像和紅外圖像融合方法、設(shè)備及可讀存儲介質(zhì)。

背景技術(shù)

紅外熱成像技術(shù)在工業(yè)檢測、消防和軍事等領(lǐng)域有廣泛應(yīng)用。在部分應(yīng)用中，為了獲取更多的場景信息，常采用雙目技術(shù)，即可見光成像和紅外成像被集成到同一監(jiān)控設(shè)備上。在可見光-紅外熱成像雙目設(shè)備上，為了使紅外圖像更好地反映場景信息，普遍采用的方法是圖像融合技術(shù)。

通過圖像融合技術(shù)可以將兩種不同類型成像傳感器或者同類傳感器不同焦距、曝光等情況下所成圖像合成一副信息量更加豐富的圖像，更適合于后期的處理和研究，這些優(yōu)勢使得圖像融合在遙感、相機或手機成像、監(jiān)控、偵查等領(lǐng)域廣泛發(fā)展，尤其是紅外與可見光圖像融合在軍事領(lǐng)域起到了非常重要的作用。近年來，大多融合方法沒有考慮到使用場景的變化，信息沒有充分利用，導(dǎo)致融合后的圖像無法根據(jù)圖像局部特點得到各區(qū)域的最優(yōu)場景信息。

發(fā)明內(nèi)容

本發(fā)明主要解決的技術(shù)問題是提供一種可見光圖像和紅外圖像融合方法、設(shè)備及可讀存儲介質(zhì)，能夠充分利用可見光圖像信息和紅外圖像信息。

為解決上述技術(shù)問題，本發(fā)明采用的一個技術(shù)方案是：提供一種可見光圖像與紅外圖像融合方法，該可見光圖像與紅外圖像融合方法包括獲取可見光圖像和紅外圖像，可見光圖像包括可見光亮度圖像和可見光色彩圖像，紅外圖像包括紅外亮度圖像和紅外偽彩圖像；對紅外偽彩圖像/可見光色彩圖像進行區(qū)域劃分，分別融合各區(qū)域的紅外偽彩圖像與可見光色彩圖像，將各區(qū)域融合后的色彩圖像進行合并得到色彩融合圖像；融合可見光亮度圖像和紅外亮度圖像，得到亮度融合圖像；合并色彩融合圖像和亮度融合圖像得到可見光-紅外融合圖像。

其中，對紅外偽彩圖像進行區(qū)域劃分包括：獲取紅外偽彩圖像對應(yīng)的紅外亮度圖像各像素點的像素值；確定像素值所在閾值區(qū)間，將紅外偽彩圖像/可見光色彩圖像劃分至與閾值區(qū)間相對應(yīng)的區(qū)域。

其中，確定像素值所在閾值區(qū)間包括：基于融合率設(shè)定閾值區(qū)間，融合率包括可見光-紅外融合圖像中紅外圖像信息與可見光圖像信息的比例。

其中，對紅外偽彩圖像進行區(qū)域劃分包括：將紅外偽彩圖像劃分為第一區(qū)域和第二區(qū)域，第一區(qū)域中紅外偽彩圖像對應(yīng)的紅外亮度圖像各像素點的像素值小于第一閾值，第二區(qū)域中紅外偽彩圖像對應(yīng)的紅外亮度圖像各像素點的像素值大于或等于第一閾值；分別融合各區(qū)域的紅外偽彩圖像與可見光色彩圖像包括：利用第一融合策略融合第一區(qū)域的可見光色彩圖像和紅外偽彩圖像；第一融合策略包括：分別確定各像素點的可見光色彩圖像融合權(quán)重和紅外偽彩圖像融合權(quán)重，將第一區(qū)域中各像素點的可見光色彩圖像色彩值與紅外偽彩圖像色彩值進行加權(quán)求和，得到第一色彩融合圖像。

其中，分別確定各像素點的可見光色彩圖像融合權(quán)重和紅外偽彩圖像融合權(quán)重包括：紅外偽彩圖像融合權(quán)重為紅外亮度圖像的像素值與第一閾值的比值，紅外偽彩圖像融合權(quán)重與可見光色彩圖像融合權(quán)重之和為1。

其中，分別確定各像素點的可見光色彩圖像融合權(quán)重和紅外偽彩圖像融合權(quán)重包括：紅外偽彩圖像對應(yīng)的紅外亮度圖像的像素值越小，紅外偽彩圖像融合權(quán)重越小；可見光色彩圖像融合權(quán)重與紅外偽彩圖像融合權(quán)重之和為1。