[發(fā)明專利]用于獲得防閃爍超分辨率圖像的車輛成像系統(tǒng)和方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201780073280.0
• 申請(qǐng)日: 2017-11-15
• 公開（公告）號(hào): CN110073402B
• 公開（公告）日: 2023-05-12
• 發(fā)明（設(shè)計(jì)）人: 凱·烏維·哈根伯格
• 申請(qǐng)（專利權(quán)）人: SMR專利責(zé)任有限公司
• 主分類號(hào): G06T3/40
• 分類號(hào): G06T3/40;H04N25/70
• 代理公司: 北京安信方達(dá)知識(shí)產(chǎn)權(quán)代理有限公司 11262
• 代理人: 李健

本發(fā)明涉及一種用于車輛以用于獲得防閃爍超分辨率圖像的成像系統(tǒng)，所述成像系統(tǒng)包括：圖像傳感器裝置(3)，其用于獲得一系列圖像；以及圖像處理裝置(5)，其適于：接收所述一系列圖像，將所述一系列圖像中的一個(gè)最新圖像的圖像信息與參考圖像進(jìn)行比較，以檢測(cè)所述最新圖像中的至少一個(gè)失配圖像區(qū)域，從所述最新圖像的所述圖像信息中去除檢測(cè)到的所述圖像區(qū)域，以獲得經(jīng)調(diào)整的圖像信息，以及將所述最新圖像的所述經(jīng)調(diào)整的圖像信息添加到超分辨率圖像中。本發(fā)明還涉及一種包括至少一個(gè)成像系統(tǒng)的至少一部分的后視顯示設(shè)備，并且涉及一種獲得防閃爍超分辨率圖像的方法。

技術(shù)領(lǐng)域

本發(fā)明涉及一種成像系統(tǒng)并涉及一種用于獲得防閃爍超分辨率圖像的方法，所述系統(tǒng)包括適于獲得一系列圖像的圖像傳感器裝置；和圖像處理裝置，其適于：接收所述一系列圖像，將所述一系列圖像的一個(gè)最新圖像的圖像信息與參考圖像進(jìn)行比較，以檢測(cè)所述最新圖像中的至少一個(gè)失配圖像區(qū)域，從所述最新圖像的所述圖像信息中去除所檢測(cè)到的所述圖像區(qū)域以獲得經(jīng)調(diào)整的圖像信息，以及將所述最新圖像的所述經(jīng)調(diào)整的圖像信息添加到超分辨率圖像中。

背景技術(shù)

發(fā)光二極管LED已成為現(xiàn)代照明設(shè)備的準(zhǔn)標(biāo)準(zhǔn)。LED燈用于路燈、汽車前燈、交通信號(hào)燈、警告標(biāo)志和/或廣告顯示器。LED一般地基于快速脈沖發(fā)射的原理操作，即LED以通常對(duì)于人眼是不可見的的非常高的速率或頻率接通和斷開。然而，現(xiàn)代相機(jī)，特別是數(shù)碼相機(jī)以非常高的可能類似于LED的脈沖速率的速率捕獲圖像。不幸的是，捕獲圖像的速率和LED的脈沖速率并不總是完全重疊，即可以在LED的關(guān)閉階段期間捕獲圖像。如果這些圖像然后在顯示設(shè)備上呈現(xiàn)為視頻流，則由于頻率的失配而出現(xiàn)所謂的“閃爍效應(yīng)”。這種效應(yīng)甚至可以通過滾動(dòng)快門的效應(yīng)加劇。

特別地，對(duì)于車輛的內(nèi)容管理系統(tǒng)(CMS)或高級(jí)駕駛員輔助系統(tǒng)(ADAS)來說，“閃爍效應(yīng)”可能會(huì)出現(xiàn)問題，因?yàn)檫@些系統(tǒng)依賴于對(duì)各類應(yīng)用的持續(xù)的燈光識(shí)別，如交通信號(hào)燈識(shí)別、汽車檢測(cè)方法、盲點(diǎn)檢測(cè)夜間模式等。

最常見的防閃爍途徑涉及由標(biāo)準(zhǔn)電源系統(tǒng)供電的LED燈泡的LED閃爍。當(dāng)使用對(duì)應(yīng)于電源頻率的倍數(shù)的快門速度時(shí)，幾乎可以完全避免閃爍效應(yīng)。遺憾的是，這些方案僅適用于具有固定同步電源的光源，而獨(dú)立動(dòng)力汽車則不然。

在現(xiàn)有技術(shù)中，描述了用于閃爍檢測(cè)和緩解的方案。例如，在US2016/006919A1和WO?2014/164951A1中描述了用于使記錄相機(jī)與LED頻率同步化的方案。在WO?2006/118686A2中描述了另一種途徑，其中來自附加傳感器的信息用于檢測(cè)閃爍。在US6421097B1中描述了一種用于檢測(cè)一系列圖像中的閃爍并執(zhí)行時(shí)間濾波的時(shí)間濾波器。

設(shè)計(jì)用于汽車工業(yè)的途徑通常涉及對(duì)所獲得的圖像進(jìn)行下采樣并且通過來自視頻系列(video?sequence)的一組不同的圖像獲取固定像素的平均值，如US?6380985B1中所描述的那樣。在US?6563511B1中所描述的途徑涉及影響像素的智能減少。另一種途徑在US9232153B2中有描述并且涉及對(duì)兩個(gè)后續(xù)圖像進(jìn)行平均。

然而，這些途徑僅對(duì)于保持空間靜態(tài)的對(duì)象才能獲得良好的結(jié)果，然而，對(duì)于運(yùn)動(dòng)對(duì)象，或者當(dāng)相機(jī)相對(duì)于對(duì)象運(yùn)動(dòng)時(shí)，這些途徑則不能很好地奏效。

一種增強(qiáng)由車輛的設(shè)備捕獲的圖像的圖片質(zhì)量的途徑在US2014/0193032A1中有描述并且涉及創(chuàng)建超分辨率圖像。即使超分辨率圖像提供了改善的圖像質(zhì)量，閃爍效果仍然可以降低圖像質(zhì)量。

因此，本發(fā)明旨在提供一種改進(jìn)的成像系統(tǒng)和方法，所述成像系統(tǒng)和方法可以在車輛上使用，并且提供高質(zhì)量的防閃爍圖像。

發(fā)明內(nèi)容