[發(fā)明專(zhuān)利]用于組合圖像的方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201310050822.6
• 申請(qǐng)日: 2013-02-08
• 公開(kāi)（公告）號(hào): CN103258320A
• 公開(kāi)（公告）日: 2013-08-21
• 發(fā)明（設(shè)計(jì)）人: 熊衛(wèi)華;單繼璋;吳東暉
• 申請(qǐng)（專(zhuān)利權(quán)）人: 全視科技有限公司
• 主分類(lèi)號(hào): G06T5/50
• 分類(lèi)號(hào): G06T5/50;G06T3/40
• 代理公司: 北京律盟知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11287
• 代理人: 齊楊

技術(shù)領(lǐng)域

本發(fā)明大體上涉及圖像處理，且具體來(lái)說(shuō)但非排他地，涉及組合圖像。

背景技術(shù)

歸因于相機(jī)系統(tǒng)的價(jià)格降低以及處理能力和數(shù)據(jù)存儲(chǔ)的相對(duì)可用性，相機(jī)系統(tǒng)的使用正在增加。相機(jī)和相機(jī)系統(tǒng)中的圖像傳感器用于多種應(yīng)用中，包含汽車(chē)、醫(yī)療、移動(dòng)設(shè)備以及安全和監(jiān)視。這些應(yīng)用常常需要一個(gè)以上相機(jī)且組合來(lái)自所述相機(jī)的圖像，其可呈現(xiàn)給用戶(hù)。

在一些情況下，需要產(chǎn)生全景圖像或甚至360度圖像。可通過(guò)合并許多相機(jī)且組合來(lái)自所述許多相機(jī)的圖像而獲得全景圖像或360度圖像。然而，每一相機(jī)增加了相機(jī)系統(tǒng)的成本，且組合來(lái)自許多相機(jī)的許多圖像增加了用以產(chǎn)生全景圖像或360度圖像的處理時(shí)間。當(dāng)所要的處理是實(shí)時(shí)的時(shí)，對(duì)許多圖像的延后處理可特別成問(wèn)題。用于減少產(chǎn)生全景圖像或360度圖像所需的相機(jī)的數(shù)目的一種解決方案是使用廣角相機(jī)。然而，來(lái)自廣角鏡頭的圖像失真使匹配并混合圖像復(fù)雜化，尤其是以實(shí)時(shí)的方式。因此，需要一種用于組合具有鏡頭失真的圖像的有效方法。

發(fā)明內(nèi)容

在一個(gè)實(shí)施例中，本申請(qǐng)案提供一種用于組合圖像的方法，所述方法包括：從第一相機(jī)俘獲包含主體的第一圖像；從第二相機(jī)俘獲包含所述主體的第二圖像；將第一預(yù)處理功能應(yīng)用于所述第一圖像上以產(chǎn)生第一經(jīng)處理圖像，所述第一預(yù)處理功能包含將旋轉(zhuǎn)矩陣的失真分量應(yīng)用于所述第一圖像，其中所述旋轉(zhuǎn)矩陣界定所述第一圖像與所述第二圖像之間的經(jīng)校正關(guān)系；將第二預(yù)處理功能應(yīng)用于所述第二圖像上以產(chǎn)生第二經(jīng)處理圖像，所述第二預(yù)處理功能包含將所述旋轉(zhuǎn)矩陣應(yīng)用于所述第二圖像；以及在處理單元中混合所述第一經(jīng)處理圖像和所述第二經(jīng)處理圖像以形成不同于由所述第一和第二相機(jī)俘獲的所述第一和第二圖像的復(fù)合圖像。

在另一實(shí)施例中，本申請(qǐng)案提供一種提供指令的非暫時(shí)性機(jī)器可存取存儲(chǔ)媒體，所述指令在由計(jì)算機(jī)執(zhí)行時(shí)將致使所述計(jì)算機(jī)執(zhí)行包括以下操作的操作：接收從第一相機(jī)俘獲的包含主體的第一圖像；接收從第二相機(jī)俘獲的包含所述主體的第二圖像；將第一預(yù)處理功能應(yīng)用于所述第一圖像上以產(chǎn)生第一經(jīng)處理圖像，所述第一預(yù)處理功能包含將旋轉(zhuǎn)矩陣的失真分量應(yīng)用于所述第一圖像，其中所述旋轉(zhuǎn)矩陣界定所述第一圖像與所述第二圖像之間的經(jīng)校正關(guān)系；將第二預(yù)處理功能應(yīng)用于所述第二圖像上以產(chǎn)生第一經(jīng)處理圖像，所述第二預(yù)處理功能包含將所述旋轉(zhuǎn)矩陣應(yīng)用于所述第二圖像；以及在處理單元中混合所述第一經(jīng)處理圖像和所述第二經(jīng)處理圖像以形成復(fù)合圖像。

在又一實(shí)施例中，本申請(qǐng)案提供一種成像系統(tǒng)，其包括：第一相機(jī)和第二相機(jī)，其中所述第一相機(jī)和所述第二相機(jī)具有大體上等同的圖像傳感器和光學(xué)器件；處理單元，其包含通信接口以與所述第一相機(jī)和所述第二相機(jī)通信；以及提供指令的非暫時(shí)性機(jī)器可存取存儲(chǔ)媒體，所述指令在由所述成像系統(tǒng)執(zhí)行時(shí)將致使所述成像系統(tǒng)執(zhí)行包括以下操作的操作：接收從所述第一相機(jī)俘獲的包含主體的第一圖像；接收從所述第二相機(jī)俘獲的包含所述主體的第二圖像；將所述第一圖像和所述第二圖像存儲(chǔ)到存儲(chǔ)器；用所述處理單元在所述第一圖像上執(zhí)行第一預(yù)處理功能以產(chǎn)生第一經(jīng)處理圖像，所述第一預(yù)處理功能包含將旋轉(zhuǎn)矩陣的失真分量應(yīng)用于所述第一圖像，其中所述旋轉(zhuǎn)矩陣界定所述第一圖像與第二圖像之間的經(jīng)校正關(guān)系；用所述處理單元在所述第二圖像上執(zhí)行第二預(yù)處理功能以產(chǎn)生第二經(jīng)處理圖像，所述第二預(yù)處理功能包含將所述旋轉(zhuǎn)矩陣應(yīng)用于所述第二圖像；以及在所述處理單元中混合所述第一經(jīng)處理圖像和所述第二經(jīng)處理圖像以形成復(fù)合圖像。

附圖說(shuō)明

參考下圖描述本發(fā)明的非限制和非詳盡的實(shí)施例，其中所有各圖中相同參考數(shù)字指代相同部分，除非另有規(guī)定。

圖1是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的相機(jī)系統(tǒng)的功能框圖。

圖2是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的相機(jī)系統(tǒng)中的兩個(gè)相機(jī)的功能框圖。

圖3是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的用于組合圖像的過(guò)程的流程圖。

圖4是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的用于確定與組合圖像相關(guān)聯(lián)的值的過(guò)程的流程圖。

圖5A是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的兩個(gè)校準(zhǔn)圖像的近似的圖。

圖5B是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的與圖5A的說(shuō)明相關(guān)聯(lián)的實(shí)例性校準(zhǔn)數(shù)據(jù)的圖表。

圖6是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的用于確定與組合圖像相關(guān)聯(lián)的值的過(guò)程的流程圖。

圖7是說(shuō)明根據(jù)本發(fā)明的實(shí)施例的用于組合圖像的過(guò)程的流程圖。

具體實(shí)施方式