[發(fā)明專利]一種圖像融合方法及移動(dòng)設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 201710260280.3
• 申請(qǐng)日: 2017-04-20
• 公開（公告）號(hào): CN107038695A
• 公開（公告）日: 2017-08-11
• 發(fā)明（設(shè)計(jì)）人: 侯劍堃;李駢臻;張長(zhǎng)定;張偉
• 申請(qǐng)（專利權(quán)）人: 廈門美圖之家科技有限公司
• 主分類號(hào): G06T5/50
• 分類號(hào): G06T5/50;G06T11/40
• 代理公司: 北京思睿峰知識(shí)產(chǎn)權(quán)代理有限公司11396
• 代理人: 謝建云,趙愛軍

技術(shù)領(lǐng)域

本發(fā)明涉及圖像處理技術(shù)領(lǐng)域，尤其是一種圖像融合方法及移動(dòng)設(shè)備。

背景技術(shù)

現(xiàn)在越來(lái)越多的移動(dòng)設(shè)備中使用到雙攝系統(tǒng)(即，由兩顆攝像頭組成的拍照系統(tǒng))，如具有雙攝系統(tǒng)的手機(jī)、相機(jī)等。現(xiàn)有的雙攝系統(tǒng)，大多是基于深度信息對(duì)圖像進(jìn)行處理，以實(shí)現(xiàn)3D效果，如圖像背景虛化、物體分割、3D掃描、輔助對(duì)焦、動(dòng)作識(shí)別等。一般在這種應(yīng)用場(chǎng)景下，會(huì)要求兩個(gè)攝像頭之間保持盡可能大的間距，以得到更高的景深精度。

另一種場(chǎng)景下，利用雙攝系統(tǒng)實(shí)現(xiàn)光學(xué)變焦，不同于以往的在后端處理圖像像素，以達(dá)到放大效果(即，數(shù)碼變焦)的處理方式，雙攝系統(tǒng)采用“遠(yuǎn)焦+近焦”的雙攝像頭組合模式，再經(jīng)過后期合成處理，從而實(shí)現(xiàn)光學(xué)變焦。

在上述各種應(yīng)用場(chǎng)景下，如何利用雙攝系統(tǒng)輸出色彩豐富、圖像質(zhì)量更高的圖像，是本發(fā)明要解決的一個(gè)問題。

發(fā)明內(nèi)容

為此，本發(fā)明提供了一種圖像融合方案，以力圖解決或者至少緩解上面存在的至少一個(gè)問題。

根據(jù)本發(fā)明的一個(gè)方面，提供了一種圖像融合方法，該方法用于處理同時(shí)針對(duì)同一物體拍攝的第一圖像和第二圖像，其中第一圖像具有亮度信息，第二圖像具有色度信息，該方法包括步驟：對(duì)第一圖像中的每個(gè)像素點(diǎn)：在第二圖像中查找是否存在與其內(nèi)容相同的像素點(diǎn)；若存在，則將查找到的第二圖像中的像素點(diǎn)的色度信息賦給第一圖像中的對(duì)應(yīng)像素點(diǎn)；根據(jù)亮度信息對(duì)第一圖像進(jìn)行超像素分區(qū)，在每個(gè)超像素分區(qū)內(nèi)，按照預(yù)定條件對(duì)色度信息進(jìn)行篩選，得到第三圖像；按照預(yù)定的采樣方法對(duì)第三圖像中尚不具有色度信息的像素點(diǎn)進(jìn)行顏色填充，使所有像素點(diǎn)都具有色度信息；以及將對(duì)應(yīng)像素點(diǎn)的色度信息和第三圖像的亮度信息相融合，得到融合后的圖像。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，根據(jù)亮度信息對(duì)第一圖像進(jìn)行超像素分區(qū)的步驟包括：利用亮度信息和像素空間坐標(biāo)對(duì)第一圖像進(jìn)行聚類處理，得到多個(gè)超像素分區(qū)。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，對(duì)第一圖像進(jìn)行聚類處理的步驟包括：計(jì)算第一圖像內(nèi)各像素點(diǎn)之間的距離值，得到各像素點(diǎn)到其他像素點(diǎn)的初始距離集；根據(jù)設(shè)置的分區(qū)數(shù)計(jì)算排列間隔，并按照排列間隔生成各分區(qū)的初始中心點(diǎn)；遍歷所有分區(qū)，分別計(jì)算每個(gè)分區(qū)的初始中心點(diǎn)鄰域內(nèi)像素點(diǎn)到該初始中心點(diǎn)的距離值，若該距離值小于該像素點(diǎn)初始距離集中的任一距離值，則將該像素點(diǎn)歸入該分區(qū)；遍歷結(jié)束后，根據(jù)各分區(qū)內(nèi)像素點(diǎn)的亮度信息和像素空間坐標(biāo)計(jì)算出該分區(qū)的新中心點(diǎn)，并計(jì)算該新中心點(diǎn)與初始中心點(diǎn)的差值；以及重復(fù)迭代上述遍歷分區(qū)、計(jì)算新中心點(diǎn)的步驟，直至新中心點(diǎn)與上一中心點(diǎn)的差值小于第一閾值，聚類結(jié)束。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，聚類結(jié)束的步驟之后，還包括：判斷聚類得到的超像素分區(qū)是否連通；以及若判斷某一超像素分區(qū)不連通，則將該分區(qū)歸入其相鄰分區(qū)。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，判斷超像素分區(qū)是否連通的步驟包括：統(tǒng)計(jì)每個(gè)超像素分區(qū)的大小；以及若該超像素分區(qū)小于第二閾值，則判斷該分區(qū)不連通。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，按照排列間隔生成各分區(qū)的初始中心點(diǎn)的步驟還包括：計(jì)算初始中心點(diǎn)與其八鄰域內(nèi)像素點(diǎn)的梯度值，選取梯度值最小的像素點(diǎn)作為該分區(qū)的初始中心點(diǎn)。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，還包括步驟：根據(jù)兩個(gè)像素點(diǎn)之間的亮度距離和物理距離加權(quán)求和得到所述兩個(gè)像素點(diǎn)的距離值。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，還包括步驟：根據(jù)第一圖像的總像素?cái)?shù)和設(shè)置的分區(qū)數(shù)計(jì)算出排列間隔：

其中，N是第一圖像的總像素?cái)?shù)，k是設(shè)置的分區(qū)數(shù)。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，第二閾值由所述排列間隔計(jì)算得到。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，按照預(yù)定條件對(duì)色度信息進(jìn)行篩選得到第三圖像的步驟包括：對(duì)具有色度信息的像素點(diǎn)，按色度信息從小到大的順序排序；以及去除處于預(yù)定區(qū)間外的像素點(diǎn)的色度信息。

可選地，在根據(jù)本發(fā)明的圖像融合方法中，預(yù)定區(qū)間與對(duì)應(yīng)超像素分區(qū)內(nèi)像素點(diǎn)總數(shù)相關(guān)。