[發(fā)明專利]圖像處理裝置、圖像處理方法和程序

有效

• 申請?zhí)枺?/td>: 201380028436.5
• 申請日: 2013-04-03
• 公開（公告）號: CN104321803B
• 公開（公告）日: 2018-06-05
• 發(fā)明（設計）人: 木村篤史
• 申請（專利權）人: 索尼公司
• 主分類號: G06T3/00
• 分類號: G06T3/00;G03B37/00;H04N5/225;H04N5/232;H04N5/91;H04N5/93
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 李曉舒

當確定要顯示的全景圖像數(shù)據(jù)集合是全周全景圖像時，圖像處理設備通過執(zhí)行用于顯示的投影處理而生成顯示圖像數(shù)據(jù)。換句話說，替代簡單地剪切并顯示全景圖像，本發(fā)明能夠通過將在全景合成期間投影到曲面的全景圖像數(shù)據(jù)集合投影到與投影中心軸相交的平面從而創(chuàng)建顯示圖像，顯示現(xiàn)實感的圖像。

技術領域

本公開涉及圖像處理裝置、圖像處理方法和用于實現(xiàn)這些的程序，并且具體涉及適于全景圖像數(shù)據(jù)的顯示的圖像處理。

背景技術

引用列表

專利文獻1：JP 2010-161520A

如專利文獻1中所示，已知從多個圖像生成一個全景(panorama)圖像的圖像處理。

例如，用戶在水平掃描相機的同時獲得多個捕獲的圖像(幀圖像數(shù)據(jù))，并且通過組合它們，可以獲得所謂的全景圖像。

注意，“掃描(sweep)”指由于為了獲得用于全景圖像生成的多個幀圖像而在成像時對成像裝置的旋轉運動導致的成像方向運動的操作。例如，在水平方向上移動成像方向的情況下，掃描方向將指向水平方向。

發(fā)明內(nèi)容

技術問題

在為全景圖像執(zhí)行再現(xiàn)和顯示的情況下，通常，執(zhí)行所謂的單視圖顯示或執(zhí)行滾動顯示。

通過將所有全景圖像數(shù)據(jù)壓縮為一個靜態(tài)圖像來顯示單視圖顯示。在此情況下，雖然可以觀看整個全景圖像，但是由于壓縮，將難以成為有魅力的圖像。

通過順序剪切全景圖像數(shù)據(jù)的部分而在滾動的同時顯示滾動顯示。通過滾動顯示，可以在對每個部分更大的屏幕上觀看全景圖像。

然而，例如，通過簡單地順序剪切投影到圓柱面等上的全景圖像數(shù)據(jù)來顯示滾動顯示，并且將不一定準確反映從用戶視點的場景，如直線部分顯著彎曲，例如水平面或建筑物。

另一方面，存在再現(xiàn)技術，其中通過將投影到圓柱面等上的全景圖像再投影到平面屏幕，將其設置為顯示圖像而獲得高沉浸感和臨場感。這樣的再現(xiàn)和顯示技術將在說明書中稱為“投影顯示”。

例如，QuickTime VR。對于虛擬環(huán)境導航的基于圖像的方法(蘋果公司)等是眾所周知的。

雖然可以認為當使用這樣的投影顯示時觀看全景圖像的顯示的用戶的滿足度可以提高，但是在替代滾動顯示簡單執(zhí)行投影顯示的以下點存在困難。

雖然為了執(zhí)行投影顯示在創(chuàng)作中可能需要全景圖像的視角，但是用戶通常很少確切地知道在數(shù)字照相機的全景模式下投影的全景圖像的視角。例如，在全景圖像中存在各種類型的圖像，如具有360°視角的全周(full circumference)圖像，具有大約120°視角的圖像或具有大約180°視角的圖像。此外，除了360°視角，由于諸如對準誤差、掃描半徑或失真像差的影響，用于從全景圖像數(shù)據(jù)獲得視角的這種計算將變得不精確，并且將不能獲得精確的視角。

這樣，僅通過全景圖像數(shù)據(jù)將不能得知視角，并且將不能執(zhí)行投影顯示的創(chuàng)作。例如，為了確保投影顯示的視角是已知的，用戶可能需要大致估計全景成像時的視角，并且在創(chuàng)作時手動輸入視角。這將是對于普通用戶困難的操作。此外，當輸入視角與實際視角顯著不同時，將導致在投影顯示圖像中出現(xiàn)失真。

由此，從實際使用角度或從顯示質(zhì)量的角度，投影顯示將不一定總是最佳的顯示系統(tǒng)。

本公開旨在實現(xiàn)一種圖像處理以便能夠例如通過廣泛地假設從專業(yè)使用或商用到對于一般消費者的設備，手動并精確地執(zhí)行全景圖像的顯示，尤其是高質(zhì)量的投影顯示。

解決問題的技術方案

根據(jù)本公開的一種圖像處理裝置，包括：顯示圖像生成部分，配置為在要成為顯示目標的全景圖像數(shù)據(jù)被判斷為全周全景圖像的情況下，通過執(zhí)行顯示投影處理來生成顯示圖像數(shù)據(jù)。