[發(fā)明專利]圖像處理裝置、攝像裝置以及圖像處理方法

有效

• 申請?zhí)枺?/td>: 201080008097.0
• 申請日: 2010-12-13
• 公開（公告）號(hào): CN102318334A
• 公開（公告）日: 2012-01-11
• 發(fā)明（設(shè)計(jì)）人: 石井育規(guī);物部祐亮
• 申請（專利權(quán)）人: 松下電器產(chǎn)業(yè)株式會(huì)社
• 主分類號(hào): H04N5/232
• 分類號(hào): H04N5/232;G06T5/20;G06T7/20;H04N1/387
• 代理公司: 永新專利商標(biāo)代理有限公司 72002
• 代理人: 胡建新

技術(shù)領(lǐng)域

本發(fā)明涉及對通過搖攝被攝體而得到的輸入圖像的晃動(dòng)進(jìn)行校正的圖像處理裝置、攝像裝置以及圖像處理方法。

背景技術(shù)

近些年，隨著相機(jī)向多功能化發(fā)展，相機(jī)變得愈益簡便。用戶的需求轉(zhuǎn)向了相機(jī)的功能所支持的攝影技術(shù)。搖攝是這樣的攝影技術(shù)之一。搖攝是指，將透鏡朝向欲在圖像內(nèi)的特定的位置將其像進(jìn)行固定的被攝體，并在快門開放期間，配合該被攝體的運(yùn)動(dòng)而移動(dòng)相機(jī)來進(jìn)行拍攝，以使被攝體的位置不偏移。通過搖攝而得到的圖像，被拍攝為背景晃動(dòng)了在曝光期間相機(jī)被移動(dòng)的部分而被攝體似乎是靜止的。

其結(jié)果，通過搖攝而得到的圖像，能夠表現(xiàn)起飛降落或低空飛行中的飛機(jī)、或者運(yùn)行中的列車、汽車或摩托車等運(yùn)動(dòng)快速的被攝體的速度感。

在用戶用手移動(dòng)相機(jī)來進(jìn)行搖攝的情況下，多出現(xiàn)因大幅度的手的晃動(dòng)而使被攝體的像也變得不鮮明的情況。尤其在用戶不是手持?jǐn)z影熟練的攝影師的情況下，搖攝是很難的攝影技術(shù)。即便是在利用獨(dú)腳架或三腳架這樣的器具來進(jìn)行搖攝的情況下，也存在與被攝體的移動(dòng)方向不同方向的晃動(dòng)(縱向晃動(dòng))出現(xiàn)于被攝體的像的情況。

以往，提出了對通過搖攝(流し撮り)而得到的圖像的晃動(dòng)進(jìn)行校正的方法(例如參照專利文獻(xiàn)1)。圖1是示出專利文獻(xiàn)1所記載的以往的攝像裝置的框圖。

圖1中，攝像裝置具備攝像部11、控制系統(tǒng)部12、原因信息保存部13、檢測部14、處理部15以及記錄部16。攝像部11拍攝圖像。控制系統(tǒng)部12驅(qū)動(dòng)攝像部11。原因信息保存部13保存使圖像劣化等的已知的變化原因信息(例如攝影光學(xué)系統(tǒng)的象差等)。檢測部14由角速度傳感器等構(gòu)成，其檢測作為圖像劣化等的變化原因的變化原因信息。處理部15處理由攝像部11拍攝的圖像。記錄部16記錄由處理部15處理后的圖像。

并且，處理部15判定攝影圖像是否是搖攝的攝影圖像。并且，處理部15，在判定為攝影圖像是搖攝的攝影圖像的情況下，利用從原因信息保存部13中保存的變化原因信息中除去搖攝的方向的變化原因信息后的數(shù)據(jù)，來進(jìn)行晃動(dòng)的校正。

并且，以往還提出了基于連拍的多個(gè)圖像來生成搖攝的圖像的方法(例如參照專利文獻(xiàn)2)。圖2是示出專利文獻(xiàn)2記載的以往的攝像裝置的框圖。

圖2中，攝像裝置具備攝像部21、背景獲得部22、處理部23以及合成部24。攝像部21拍攝包括運(yùn)動(dòng)的被攝體的像的多個(gè)幀。背景獲得部22計(jì)算多個(gè)幀間的圖像的差分，以便從多個(gè)幀除去運(yùn)動(dòng)的被攝體的像。處理部23，通過對除去被攝體的像之后的圖像進(jìn)行模糊處理，從而能夠生成使背景模糊的圖像。合成部24，通過將被攝體的像重合在模糊處理的結(jié)果中，從而生成背景模糊且被攝體鮮明的圖像。

專利文獻(xiàn)1：(日本)特開2007-074269號(hào)公報(bào)

專利文獻(xiàn)2：(日本)特開2006-339784號(hào)公報(bào)

然而，專利文獻(xiàn)1所示的方法不能校正搖攝的方向的晃動(dòng)。因此，在作為搖攝的對象的被攝體的像具有搖攝方向的晃動(dòng)的情況下，不能有效地對晃動(dòng)進(jìn)行校正。

并且，專利文獻(xiàn)2所示的方法，因?yàn)閷Σ淮嬖诨蝿?dòng)的背景圖像進(jìn)行模糊處理，因此不能得到具有被攝體的移動(dòng)方向上的晃動(dòng)的背景圖像。也就是說，專利文獻(xiàn)2所示的方法，不能得到表現(xiàn)了被攝體的速度感的搖攝圖像。

發(fā)明內(nèi)容

本發(fā)明用于解決上述以往的課題，目的在于提供這樣一種圖像處理裝置、攝像裝置以及圖像處理方法：對通過搖攝被攝體而得到的圖像的晃動(dòng)進(jìn)行校正，從而能夠生成被攝體的像的晃動(dòng)被抑制且表現(xiàn)出被攝體的速度感的圖像。

為了解決以往的課題，本發(fā)明的一個(gè)實(shí)施例所涉及的圖像處理裝置，對通過搖攝被攝體而得到的輸入圖像的晃動(dòng)進(jìn)行校正，該圖像處理裝置具備：晃動(dòng)推定部，針對所述輸入圖像內(nèi)的多個(gè)區(qū)域的每一個(gè)區(qū)域，推定晃動(dòng)的方向以及晃動(dòng)的大小；分簇部，基于被推定出的所述晃動(dòng)的方向以及所述晃動(dòng)的大小中的至少一方的相似性，對所述多個(gè)區(qū)域進(jìn)行分簇(clusting)；被攝體區(qū)域確定部，從通過進(jìn)行所述分簇而得到的多個(gè)簇中，確定與所述被攝體對應(yīng)的至少一個(gè)簇；以及晃動(dòng)校正部，基于被推定出的所述晃動(dòng)的方向以及所述晃動(dòng)的大小，對屬于被確定的所述簇的區(qū)域的晃動(dòng)進(jìn)行校正。