[發(fā)明專利]圖像處理裝置和方法

在審

• 申請?zhí)枺?/td>: 201980047072.2
• 申請日: 2019-07-05
• 公開（公告）號: CN112425175A
• 公開（公告）日: 2021-02-26
• 發(fā)明（設計）人: 加藤毅;隈智;中神央二;矢野幸司
• 申請（專利權）人: 索尼公司
• 主分類號: H04N19/597
• 分類號: H04N19/597;G06T9/00;H04N19/46
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 杜誠;楊林森

1.一種圖像處理裝置，包括：

編碼單元，其通過對二維平面圖像進行編碼來生成編碼數(shù)據(jù)，在所述二維平面圖像中，將具有三維形狀的對象表示為點群的點云的位置信息和屬性信息被投影至二維平面上；以及

生成單元，其生成比特流，所述比特流包括由所述編碼單元生成的所述編碼數(shù)據(jù)和用于渲染所述點云的元數(shù)據(jù)。

2.根據(jù)權利要求1所述的圖像處理裝置，其中，所述元數(shù)據(jù)包括索引，所述索引識別具有針對用于渲染的相機的預設條件的相機參數(shù)。

3.根據(jù)權利要求2所述的圖像處理裝置，其中，所述相機參數(shù)包括指示所述相機的位置的參數(shù)。

4.根據(jù)權利要求2所述的圖像處理裝置，其中，所述相機參數(shù)包括指示所述相機的方向的參數(shù)。

5.根據(jù)權利要求2所述的圖像處理裝置，其中，所述相機參數(shù)包括指示所述相機的朝上方向的參數(shù)。

6.根據(jù)權利要求2所述的圖像處理裝置，其中，所述相機參數(shù)包括指示所述相機的投影方法的參數(shù)。

7.根據(jù)權利要求2所述的圖像處理裝置，其中，所述相機參數(shù)包括指示所述相機的視角的參數(shù)。

8.根據(jù)權利要求1所述的圖像處理裝置，其中，所述元數(shù)據(jù)包括識別用于渲染的相機的目的的索引。

9.根據(jù)權利要求8所述的圖像處理裝置，其中，所述目的包括在編碼時的質量檢查。

10.根據(jù)權利要求8所述的圖像處理裝置，其中，所述目的包括所述相機的建議取向。

11.根據(jù)權利要求8所述的圖像處理裝置，其中，所述目的包括所述相機的建議移動軌跡。

12.根據(jù)權利要求1所述的圖像處理裝置，其中，所述元數(shù)據(jù)包括真實比例與通過渲染所述點云獲得的圖像中的比例之間的變換率。

13.根據(jù)權利要求1所述的圖像處理裝置，其中，所述元數(shù)據(jù)包括使用包圍盒作為參考而設置的相機參數(shù)。

14.根據(jù)權利要求1所述的圖像處理裝置，其中，所述元數(shù)據(jù)包括指示用于渲染的相機的移動軌跡的相機移動軌跡參數(shù)。

15.根據(jù)權利要求1所述的圖像處理裝置，其中，所述元數(shù)據(jù)包括指示所述對象的移動軌跡的對象移動軌跡參數(shù)。

16.一種圖像處理方法，包括：

通過對二維平面圖像進行編碼來生成編碼數(shù)據(jù)，在所述二維平面圖像中，將具有三維形狀的對象表示為點群的點云的位置信息和屬性信息被投影至二維平面上；以及

生成比特流，所述比特流包括生成的所述編碼數(shù)據(jù)和用于渲染所述點云的元數(shù)據(jù)。

17.一種圖像處理裝置，包括：

解碼單元，所述解碼單元對比特流進行解碼，所述比特流包括通過對二維平面圖像進行編碼而獲得的編碼數(shù)據(jù)和用于渲染所述點云的元數(shù)據(jù)，在所述二維平面圖像中，將具有三維形狀的對象表示為點群的點云的位置信息和屬性信息被投影至二維平面上，所述解碼單元重建所述點云，以及提取所述元數(shù)據(jù)；以及

渲染單元，其通過使用由所述解碼單元提取的所述元數(shù)據(jù)來渲染由所述解碼單元重建的所述點云。

18.根據(jù)權利要求17所述的圖像處理裝置，還包括

控制單元，其控制用于基于所述元數(shù)據(jù)渲染所述點云的相機參數(shù)，

其中，所述渲染單元通過使用由所述控制單元控制的所述相機參數(shù)來渲染所述點云。