[發明專利]多視角攝像及圖像處理裝置、系統及方法與解碼處理方法

有效

• 申請號: 200710305690.1
• 申請日: 2007-12-28
• 公開（公告）號: CN101472190A
• 公開（公告）日: 2009-07-01
• 發明（設計）人: 劉源
• 申請（專利權）人: 深圳華為通信技術有限公司
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N15/00
• 代理公司: 北京集佳知識產權代理有限公司
• 代理人: 逯長明

1.一種多視角攝像及圖像處理裝置，其特征在于，包括依次連接的攝像單 元、采集單元、選擇單元和編碼單元，其中，

所述攝像單元用于攝像，包括進行多視角攝像并輸出立體視頻數據；

所述采集單元用于采集所述攝像單元輸出的立體視頻數據；

所述選擇單元根據接收到的指定視角指令控制所述攝像單元進行所述指定 視角攝像，得到至少一路立體視頻數據；所述選擇單元具體用于：根據接收到 的指定視角指令控制所述攝像單元的所述指定視角對應的攝像機進行攝像，并 輸出所述立體視頻數據；或根據接收到的指定視角指令控制所述攝像單元的攝 像機調整在所述指定視角并進行攝像，并輸出所述立體視頻數據；或根據接收 到的指定視角指令控制所述指定視角的鄰近攝像機進行攝像，并輸出所述立體 視頻數據；

所述編碼單元用于編碼，包括對所述選擇單元選出的立體視頻數據進行編 碼。

2.根據權利要求1所述的多視角攝像及圖像處理裝置，其特征在于，所述 選擇單元集成在所述攝像單元、采集單元或編碼單元中。

3.根據權利要求1所述的多視角攝像及圖像處理裝置，其特征在于：

采集單元還用于將所述指定視角的鄰近攝像機攝像得到的數據及每個攝像 機內參和外參、以及采集時間戳向所述編碼單元發送。

4.根據權利要求1所述的多視角攝像及圖像處理裝置，其特征在于，采集 單元進一步包括：

圖像處理單元，用于將所述鄰近指定視角的攝像機攝像得到的數據進行重 構，得到虛擬視角數據并向所述編碼單元發送。

5.根據權利要求1所述的多視角攝像及圖像處理裝置，其特征在于，所述編 碼單元的編碼內容包括下面至少一種：

原始視頻數據；

原始視頻數據和視差數據/深度數據；

原始視頻數據、視差數據/深度數據和殘差數據。

6.根據權利要求1至5任一項所述的多視角攝像及圖像處理裝置，其特征 在于：

所述編碼單元具體用于根據接收到的用戶觀看的視角指令和顯示所述立體 視頻數據的顯示單元的顯示方式指令，采用相應編碼方式對所述立體視頻數據 進行編碼，所述顯示方式包括二維顯示、雙目立體視頻顯示或多視角視頻顯示。

7.一種多視角攝像及圖像處理系統，其特征在于，包括相互連接的多視角 攝像及圖像處理裝置和多視角解碼和圖像處理及顯示裝置：

所述多視角攝像及圖像處理裝置用于進行多視角攝像并輸出立體視頻數 據，根據接收到的指定視角指令控制所述攝像單元進行所述指定視角攝像，從 所述立體視頻數據中選擇至少一路數據，編碼后發送給多視角解碼和圖像處理 及顯示裝置；

所述根據接收到的指定視角指令控制所述攝像單元進行所述指定視角攝像 具體包括：根據接收到的指定視角指令控制所述攝像單元的所述指定視角對應 的攝像機進行攝像，并輸出所述立體視頻數據；或根據接收到的指定視角指令 控制所述攝像單元的攝像機調整在所述指定視角并進行攝像，并輸出所述立體 視頻數據；或根據接收到的指定視角指令控制所述指定視角的鄰近攝像機進行 攝像，并輸出所述立體視頻數據；

所述多視角解碼和圖像處理及顯示裝置用于向所述多視角攝像及圖像處理 裝置發送控制指定視角進行攝像的指令，所述指令還包括是否支持調整攝像機 位置的信息，并對所述多視角攝像及圖像處理裝置發送的數據進行解碼。

8.根據權利要求7所述的多視角攝像及圖像處理系統，其特征在于，

所述多視角解碼和圖像處理及顯示裝置進一步用于發送用戶到顯示表面的 距離信息，以及根據用戶到顯示表面的距離信息對所述多視角攝像及圖像處理 裝置輸出的立體視頻數據進行圖像重構。