[發明專利]立體全景圖像合成裝置、圖像捕獲裝置、立體全景圖像合成方法、記錄介質、以及計算機程序

有效

• 申請號: 201180031312.3
• 申請日: 2011-06-21
• 公開（公告）號: CN102959943A
• 公開（公告）日: 2013-03-06
• 發明（設計）人: 大島宗之
• 申請（專利權）人: 富士膠片株式會社
• 主分類號: H04N5/232
• 分類號: H04N5/232;H04N5/225;H04N13/02
• 代理公司: 北京天昊聯合知識產權代理有限公司 11112
• 代理人: 陳源;李銘

1.一種立體全景圖像合成裝置，包括：

圖像獲取單元，其被配置成獲取在搖動包括單個成像光學系統和成像元件的圖像捕獲裝置的同時以預定幀速率連續捕獲的多個圖像；

圖像選擇單元，其被配置成從所獲取的多個圖像選擇用于全景圖像合成的圖像，所述圖像選擇單元被配置成選擇這樣的圖像：其中這些圖像之間的光學流的平移矢量的水平分量處在預先設置的預定范圍內；

重疊區域檢測單元，其被配置成檢測所選擇的圖像中的時間相鄰圖像之間的重疊區域；

修剪單元，其被配置成切出檢測到的重疊區域的圖像；

存儲單元，其被配置成將所述重疊區域的被切出圖像存儲為左圖像和右圖像；以及

全景圖像合成單元，其被配置成基于所存儲的左圖像的圖像組和所存儲的右圖像的圖像組，來合成左全景圖像和右全景圖像。

2.根據權利要求1所述的立體全景圖像合成裝置，進一步包括：

相應點檢測單元，其被配置成將所獲取的多個圖像當中的預定圖像設置為基準圖像，并且被配置成檢測在所述基準圖像和在與所述基準圖像的時間不同的時間捕獲的一個或多個不同圖像之間具有相同特征的相應點；以及

光學流計算單元，其被配置成基于由所述相應點檢測單元檢測的所述相應點，來計算所述光學流，

其中，所述圖像選擇單元選擇所計算的光學流的平移矢量的水平分量處在預先設置的預定范圍內的圖像，并且將不同的被選擇圖像設置為下一個基準圖像。

3.根據權利要求1或2所述的立體全景圖像合成裝置，

其中，所述全景圖像合成單元根據圖像之間的光學流的平移矢量的水平分量，來將所存儲的左圖像的圖像組的每個圖像修剪為狹縫形狀，并且基于所述光學流的平移矢量來合成修剪后的狹縫形狀圖像，以生成左全景圖像，以及根據圖像之間的光學流的平移矢量的水平分量，來將所存儲的右圖像的圖像組的每個圖像修剪為狹縫形狀，并且基于所述光學流的平移矢量來合成修剪后的狹縫形狀圖像，以生成右全景圖像。

4.根據權利要求1或2所述的立體全景圖像合成裝置，

其中，所述全景圖像合成單元通過基于所存儲的左圖像的圖像組的圖像之間的所述光學流的平移矢量，按照時間順序方式相對地移動所述左圖像的圖像組并且將所述圖像組映射到存儲器上，來合成所述左全景圖像，并且通過基于所存儲的左圖像的圖像組的圖像之間的所述光學流的平移矢量，按照時間順序方式相對地移動所述右圖像的圖像組并且將所述圖像組映射到存儲器上，來合成所述右全景圖像。

5.根據權利要求3或4所述的立體全景圖像合成裝置，

其中，所述全景圖像合成單元進一步包括：修剪單元，其被配置成修剪在通過所述圖像合成單元合成的所述左全景圖像和所述右全景圖像之間具有重疊像素的區域的圖像。

6.根據權利要求1至5中任一項所述的立體全景圖像合成裝置，進一步包括：

記錄單元，其被配置成相互關聯地記錄通過所述全景圖像合成單元生成的所述左全景圖像和所述右全景圖像。

7.一種圖像捕獲裝置，包括根據權利要求1至6中任一項所述的立體全景圖像合成裝置。

8.根據權利要求7所述的圖像捕獲裝置，進一步包括：

模式設置單元，其被配置成設置立體全景成像模式；以及

控制單元，其被配置成當選擇所述立體全景成像模式并且輸入成像開始命令時，固定聚焦位置、曝光條件和白平衡增益，并且以所述預定幀速率連續地捕獲圖像。

9.根據權利要求7或8所述的圖像捕獲裝置，進一步包括：

模式設置單元，其被配置成設置立體全景成像模式；

平移矢量計算單元，其被配置成計算在所述立體全景成像模式下成像時捕獲的圖像之間的光學流的平移矢量的水平分量；以及

警報單元，其被配置成當由所述平移矢量計算單元計算的所述平移矢量的水平分量的絕對值大于預先設置的閾值時，發布警報。

10.根據權利要求7或8所述的圖像捕獲裝置，進一步包括：

模式設置單元，其被配置成設置立體全景成像模式；

角速度檢測單元，其被配置成檢測在所述立體全景成像模式下成像時所述圖像捕獲裝置的角速度；以及

警報單元，其被配置成當由所述角速度檢測單元檢測的所述角速度大于基于所述預定幀速率設置的最大角速度時，發布警報。