[發明專利]圖像生成裝置和圖像生成方法

有效

• 申請號: 201180074555.5
• 申請日: 2011-11-07
• 公開（公告）號: CN103907340B
• 公開（公告）日: 2017-03-29
• 發明（設計）人: 古村京子;平田真一;山岸建
• 申請（專利權）人: 索尼電腦娛樂公司
• 主分類號: H04N5/225
• 分類號: H04N5/225;G03B37/00
• 代理公司: 北京市柳沈律師事務所11105
• 代理人: 邸萬奎

技術領域

本發明涉及一種圖像生成裝置和方法。具體地，本發明涉及一種用于生成合成圖像的裝置和方法。

背景技術

數碼靜止相機和數碼視頻攝像機廣泛流行，并且拾取的靜止畫面或運動畫面被存儲到計算機中、并被讀取或處理或顯示在游戲機或電視(TV)系統的屏幕上的機會正在增加。此外，還流行將拾取的運動畫面上傳到互聯網的發帖網站，以及將該運動畫面分享給不同的相機用戶。

有些數碼相機能夠拾取全景圖像，并且容易地拾取具有寬視角的全景圖像已成為可能。還經常利用一種軟件工具，用于通過將由數碼相機拾取的、圖像拾取方向連續變化的多個圖像粘貼在一起來生成全景圖像。

此外，諸如具有相機的便攜電話機的便攜設備是可得的，其中，提供了全景圖像拾取模式或用于合成全景圖像的應用，并且當便攜設備的傾斜連續變化時，可以拾取多個圖像并將該多個圖像自動合成為全景圖像。

【引用列表】

【專利文獻】

【專利文獻1】

JP2011-76249A

發明內容

【技術問題】

然而，如果使用數碼相機、具有相機的便攜設備、或類似設備執行全景圖像拾取，則由于相機抖動、旋轉軸偏移等可能無法拾取準確的全景圖像，并且可能無法成功地執行圖像匹配，從而導致在合成的全景圖像中出現錯誤。

鑒于上述問題而作出本發明，并且本發明的一個目的是提供一種能夠準確地生成合成圖像的技術

【問題的解決方案】

為了解決上述問題，本發明的一個模式的圖像生成裝置包括：特征點提取單元，被配置為在使用內置于便攜設備的相機拾取的、并且具有彼此不同的搖翻角或仰角的多個分量圖像的重疊區域中提取特征點；自身位置估計單元，被配置為同時在相機位置彼此偏移的兩個分量圖像中估計所述特征點的三維坐標值和所述相機位置的三維坐標值，所述特征點的三維坐標值和所述相機位置的三維坐標值彼此相關聯；以及合成圖像生成單元，被配置為基于所估計的相機位置的三維坐標值，調整所述分量圖像的特征點的三維坐標值以校正所述分量圖像，并組合具有彼此不同的搖翻角或仰角的多個分量圖像以生成合成圖像。

本發明的另一模式是一種圖像生成方法。該方法包括：特征點提取步驟，在使用內置于便攜設備的相機拾取的、并且具有彼此不同的搖翻角或仰角的多個分量圖像的重疊區域中提取特征點；自身位置估計步驟，同時在相機位置彼此偏移的兩個分量圖像中估計所述特征點的三維坐標值和所述相機位置的三維坐標值，所述特征點的三維坐標值和所述相機位置的三維坐標值彼此相關聯；以及合成圖像生成步驟，基于所估計的相機位置的三維坐標值，調整所述分量圖像的特征點的三維坐標值以校正所述分量圖像，并組合具有彼此不同的搖翻角或仰角的多個分量圖像以生成合成圖像。

還應注意，上述組件的任意結合以及在方法、裝置、系統、計算機程序、數據結構、記錄介質等之間變換的本發明的各種表示可有效地作為本發明的模式。

【本發明的有益效果】

利用本發明，可以準確地生成合成圖像。

附圖說明

【圖1】

圖1(a)和1(b)是用于全景圖像拾取的便攜終端的外觀圖。

【圖2】

圖2是示出便攜終端的傾斜的視圖。

【圖3】

圖3(a)和3(b)是示出便攜終端的方位(orientation)的視圖。

【圖4】

圖4(a)至4(d)是示出當使用便攜終端的后側相機拾取全景圖像時的圖像拾取方向的視圖。

【圖5】

圖5(a)和5(b)是示出相機的方位角θ和相機的仰角(elevation?angle)φ的視圖。

【圖6】

圖6(a)至6(c)是示出當便攜終端的后側相機的初始位置在方位角θ的方向時所拾取的全景圖像的視圖。

【圖7】

圖7(a)至7(c)是示出當后側相機的仰角φ＝60度時所拾取的全景圖像的視圖。

【圖8A】

圖8A是示出將多個圖像彼此連接以生成全景圖像的方法的視圖。

【圖8B】

圖8B是示出將多個圖像彼此連接以生成全景圖像的另一法的視圖。

【圖9】

圖9是全景圖像生成裝置的功能框圖。

【圖10】

圖10是示出全景圖像的圖像拾取過程的流程圖。

【圖11】