[發(fā)明專利]用于處理圖像的方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201780091173.0
• 申請(qǐng)日: 2017-05-24
• 公開(kāi)（公告）號(hào): CN110663246B
• 公開(kāi)（公告）日: 2021-08-06
• 發(fā)明（設(shè)計(jì)）人: 周游;劉潔;唐克坦
• 申請(qǐng)（專利權(quán)）人: 深圳市大疆創(chuàng)新科技有限公司
• 主分類號(hào): H04N5/232
• 分類號(hào): H04N5/232;H04N5/262
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 呂朝蕙

用于處理具有第一像素集的圖像的方法和系統(tǒng)。所述方法可以包括生成圖像的深度圖，深度圖包括表示圖像中的多個(gè)物體的距離的第二像素值集。所述方法還可以包括基于深度圖識(shí)別多個(gè)物體在圖像中所處的多個(gè)不同深度，并且使用深度圖來(lái)確定多個(gè)不同深度中的一個(gè)所識(shí)別深度與多個(gè)不同深度中的其他所識(shí)別深度中的每一個(gè)之間的相對(duì)距離。最后，所述方法可以包括基于每個(gè)所確定的相對(duì)距離對(duì)第一像素集中的像素進(jìn)行模糊。

版權(quán)聲明

本專利文檔的公開(kāi)的一部分包含受到版權(quán)保護(hù)的材料。版權(quán)所有者不反對(duì)任何人對(duì)專利文檔或?qū)＠_(kāi)的傳真復(fù)制(因?yàn)樗霈F(xiàn)在專利和商標(biāo)局的專利文件或記錄中)，但在其他方面保留所有版權(quán)。

技術(shù)領(lǐng)域

本公開(kāi)總體上涉及圖像處理技術(shù)，更具體地，涉及用于對(duì)圖像進(jìn)行部分模糊的方法和系統(tǒng)。

背景技術(shù)

在當(dāng)代攝影技術(shù)中，存在用于捕捉和處理圖像的技術(shù)，其中圖像中的某些物體被清晰地呈現(xiàn)(例如，聚焦)，而背景和/或前景物體中的其他物體看起來(lái)是模糊(例如，失焦)的。具體地，圖像的目標(biāo)部分被清晰地呈現(xiàn)，同時(shí)使用光學(xué)和/或數(shù)字模糊處理使圖像中的其他部分變得柔和。這些技術(shù)產(chǎn)生了具有強(qiáng)調(diào)或突出的感興趣點(diǎn)(例如，目標(biāo))的圖像，該感興趣點(diǎn)與圖像中的其他特征分開(kāi)，這是因?yàn)樵摳信d趣點(diǎn)被聚焦，而與此相比圖像的其他部分看起來(lái)是失焦的。

生成這種類型的圖像一般需要特定類型的相機(jī)或特定的后期處理算法以生成銳利部分和模糊部分。可用于該技術(shù)的特定相機(jī)包括可以對(duì)目標(biāo)進(jìn)行光學(xué)聚焦的相機(jī)。這些相機(jī)包括具有光圈控制的單反(SLR)相機(jī)、具有透視控制鏡頭(例如，移軸鏡頭)的相機(jī)和光場(chǎng)相機(jī)。一些相機(jī)系統(tǒng)(包括某些智能手機(jī)中的相機(jī)系統(tǒng))通過(guò)利用像素陣列捕捉數(shù)字圖像，并使用后期處理算法重新渲染圖像以模糊所需景深之外的像素，也可以實(shí)現(xiàn)這種模糊效果。例如，這些算法可以利用智能手機(jī)的雙相機(jī)系統(tǒng)來(lái)捕捉立體圖像，可以從該立體圖像中識(shí)別景深以用于后處理模糊算法，或者備選地，其他相機(jī)系統(tǒng)可以采用應(yīng)用于單個(gè)圖像的手動(dòng)像素模糊算法。然而，后一種方法導(dǎo)致不自然的模糊，看起來(lái)不美觀。

處理來(lái)自不同視角的多個(gè)圖像將產(chǎn)生最佳效果，以清晰的分辨率生成目標(biāo)，同時(shí)通過(guò)以人眼看起來(lái)更自然的方式進(jìn)行模糊來(lái)使周圍物體變得柔和。然而，用于渲染這種部分模糊的圖像的現(xiàn)有技術(shù)并不適用于在所捕捉的多個(gè)圖像之間顯著移動(dòng)的相機(jī)，例如，安裝在可移動(dòng)物體上的相機(jī)，特別是安裝在可移動(dòng)物體上的非立體相機(jī)(例如，2D相機(jī))。因此，需要一種改進(jìn)的處理圖像的方法，該方法可以從安裝在移動(dòng)物體(例如，無(wú)人機(jī)UAV)上的相機(jī)捕捉的圖像中生成部分模糊的圖像。

發(fā)明內(nèi)容

本公開(kāi)涉及用于處理具有第一像素集的圖像的系統(tǒng)和方法。在所公開(kāi)的實(shí)施例中，所述方法可以包括生成圖像的深度圖，深度圖包括表示圖像中的多個(gè)物體的距離的第二像素值集。所述方法還可以包括基于深度圖識(shí)別多個(gè)物體在圖像中所處的多個(gè)不同深度，并且使用深度圖來(lái)確定多個(gè)不同深度中的一個(gè)所識(shí)別深度(例如，“目標(biāo)”深度)與多個(gè)不同深度中的其他所識(shí)別深度中的每一個(gè)之間的相對(duì)距離。此外，所述方法可以包括基于每個(gè)所確定的相對(duì)距離對(duì)第一像素集中的像素進(jìn)行模糊。在一些實(shí)施例中，可以按照以下降序?qū)Φ谝幌袼丶械闹辽僖恍┫袼剡M(jìn)行模糊：從與距目標(biāo)深度最遠(yuǎn)相對(duì)距離相對(duì)應(yīng)的所識(shí)別深度處的像素到與距目標(biāo)深度最近相對(duì)距離相對(duì)應(yīng)的所識(shí)別深度處的像素。

進(jìn)一步地，所公開(kāi)的實(shí)施例提供了用于處理具有第一像素集的圖像的系統(tǒng)。所述系統(tǒng)可以包括其中存儲(chǔ)有指令的存儲(chǔ)器和被配置為執(zhí)行所述指令的一個(gè)或多個(gè)處理器。所述一個(gè)或多個(gè)處理器可以被配置為執(zhí)行所述指令以生成圖像的深度圖，深度圖包括表示圖像中的多個(gè)物體的距離的第二像素值集。所述一個(gè)或多個(gè)處理器還可以被配置為基于深度圖識(shí)別多個(gè)物體在圖像中所處的多個(gè)不同深度，并且使用深度圖來(lái)確定多個(gè)不同深度中的一個(gè)所識(shí)別深度與多個(gè)不同深度中的其他所識(shí)別深度中的每一個(gè)之間的相對(duì)距離。此外，所述一個(gè)或多個(gè)處理器可以被配置為基于每個(gè)所確定的相對(duì)距離對(duì)第一像素集中的像素進(jìn)行模糊。