[發明專利]圖像處理設備、編碼裝置、解碼裝置、圖像處理方法、程序、編碼方法和解碼方法

在審

• 申請號: 201880090216.8
• 申請日: 2018-07-23
• 公開（公告）號: CN111788601A
• 公開（公告）日: 2020-10-16
• 發明（設計）人: 菅野尚子;田中潤一
• 申請（專利權）人: 索尼公司
• 主分類號: G06T3/00
• 分類號: G06T3/00
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 王萍;李彥麗

1.一種圖像處理設備，其響應于由兩個或更多個間隔開的圖像捕獲裝置同時捕獲的對象的連續圖像組和指示所述對象相對于至少一個距離測量裝置的三維位置的深度信息，所述圖像處理設備包括：

幀選擇單元，其被配置成選擇所述連續圖像組的集合；

模型生成單元，其被配置成針對所述圖像組的集合中的每個圖像組，根據由所述兩個或更多個間隔開的圖像捕獲裝置同時捕獲的圖像以及根據所述深度信息來生成三維模型，并且將紋理映射到所生成的三維模型；以及

合成單元，其被配置成通過將由所述模型生成單元生成的三維模型疊加在預定背景上來生成關于頻閃圖像視點的頻閃圖像。

2.根據權利要求1所述的圖像處理裝置，其中，

所述幀選擇單元被配置成選擇圖像組用于供所述模型生成單元使用以生成包括在所述頻閃圖像中的在三維空間中相互不干擾的相應三維模型。

3.根據權利要求4所述的圖像處理裝置，其中，

所述幀選擇單元被配置成檢測干擾程度，所述干擾程度是指示基于多個預定視點圖像生成的三維模型與基于多個其他視點圖像生成的三維模型之間的三維空間中的交疊程度的信息。

4.根據權利要求1所述的圖像處理裝置，還包括：

確定單元，所述確定單元根據所述被攝體的位置改變來確定所述被攝體的移動的存在，其中，

所述合成單元被配置成在所述確定單元確定所述被攝體的移動存在的情況下生成所述頻閃圖像。

5.根據權利要求1所述的圖像處理裝置，還包括：

顯示控制單元，其在顯示裝置上顯示所述頻閃圖像，其中，所述顯示控制單元被配置成在所述被攝體的位置的改變量等于或小于預定值的情況下，顯示通過將所述三維模型的顯示位置布置在與原始位置不同的位置處而生成的頻閃圖像。

6.根據權利要求1所述的設備，所述圖像處理設備包括一組裝置，所述一組裝置提供：

兩個或更多個圖像捕獲裝置，所述兩個或更多個圖像捕獲裝置被布置成使得所述連續圖像包括從各個不同的圖像捕獲視點捕獲的圖像組；以及

一個或更多個距離測量裝置。

7.根據權利要求6所述的設備，其中，所述兩個或更多個圖像捕獲裝置被布置成彼此同步地捕獲圖像。

8.根據權利要求6所述的設備，所述設備包括幀同步單元，所述幀同步單元用于檢測一組圖像之間的同步偏移。

9.根據權利要求1所述的設備，其中，所述模型生成單元被配置成檢測與一組圖像中的各個圖像相對應的可視外殼的交集。

10.根據權利要求1所述的設備，其中，所述模型生成單元被配置成生成表示所述對象的網格，并且對所生成的網格執行紋理映射。

11.一種圖像處理方法，包括以下步驟：

接收由兩個或更多個間隔開的圖像捕獲裝置同時捕獲的對象的連續圖像組和指示所述對象相對于至少一個距離測量裝置的三維位置的深度信息；

選擇所述連續圖像組的集合；以及

針對所述圖像組的集合中的每個圖像組，根據由所述兩個或更多個間隔開的圖像捕獲裝置同時捕獲的圖像以及根據所述深度信息來生成三維模型；

將紋理映射到所生成的三維模型；

通過將所述三維模型疊加在預定背景上來生成關于頻閃圖像視點的頻閃圖像。

12.一種圖像處理裝置，包括：

獲取單元，其獲取通過在第一時間點處捕獲被攝體而獲得的多個視點圖像、通過在第二時間點處捕獲所述被攝體而獲得的多個視點圖像以及通過在第三時間點處捕獲所述被攝體而獲得的多個視點圖像；以及

圖像生成單元，其基于所述第一時間點至所述第三時間點中的至少兩個時間點中的各個時間點的被攝體位置來生成合成三維模型，所述合成三維模型包括基于所述各個時間點的多個視點圖像生成的在所述各個時間點處的被攝體的三維模型。