[發明專利]全向視頻編碼和流傳輸

有效

• 申請號: 201780007828.1
• 申請日: 2017-01-23
• 公開（公告）號: CN109121466B
• 公開（公告）日: 2022-09-02
• 發明（設計）人: 溫子煜;趙一開;李吉生;郭碧川;溫江濤;李思涵;陸垚
• 申請（專利權）人: 北京達佳互聯信息技術有限公司
• 主分類號: H04N19/597
• 分類號: H04N19/597;H04N19/70;H04N19/124;H04N19/17;H04N5/232;H04N5/247
• 代理公司: 北京同達信恒知識產權代理有限公司 11291
• 代理人: 周云

1.一種對全向視頻進行編碼的方法，包括：

接收球形全向視頻數據；

將所述球形全向視頻數據的幀分割成北極分段、南極分段和至少一個連接分段，其中所述北極分段通過將所述球形全向視頻數據的所述幀的頂部球形圓頂部分映射到圓上而形成，所述南極分段通過將所述球形全向視頻數據的所述幀的底部球形圓頂部分映射到圓上而形成，以及所述至少一個連接分段通過將所述球形全向視頻數據的所述幀的、連接所述頂部球形圓頂部分和所述底部球形圓頂部分的球形連接部分映射到至少一個矩形上而形成；

將所述北極分段、所述南極分段和所述至少一個連接分段堆疊在一起，以形成對應于所述球形全向視頻數據的所述幀的二維(2D)幀；以及

對所述2D幀進行編碼。

2.根據權利要求1所述的方法，該方法還包括：

將所述球形全向視頻數據的多個幀分割成多個北極分段、多個南極分段和多個連接分段；

將所述多個北極分段、所述多個南極分段和所述多個連接分段堆疊成多個2D幀；以及

對所述多個2D幀進行編碼。

3.根據權利要求1所述的方法，其中，所述至少一個連接分段包括多個連接分段，每個所述連接分段將所述球形連接部分的一部分映射到相應的矩形上。

4.根據權利要求1所述的方法，其中圓極被放置在方形內。

5.根據權利要求1所述的方法，其中所述北極分段、所述南極分段和所述至少一個連接分段中的每一者都包括重疊的像素數據。

6.根據權利要求5所述的方法，其中，所述分段之間存在高達5％的重疊。

7.根據權利要求6所述的方法，其中，所述至少一個連接分段包括2到4個分段。

8.根據權利要求2所述的方法，該方法還包括在對所述2D幀進行編碼之前跟蹤一個或多個感興趣的區域(ROI)。

9.根據權利要求1所述的方法，其中，所述對所述2D幀進行編碼包括：

將一個或多個視點編碼到第一流中；以及

針對每個視點，對附加流進行編碼，所述附加流包括幀內編碼幀流、預測幀流和雙向預測幀流。

10.根據權利要求9所述的方法，該方法還包括：對編碼后的視點中的至少一者進行流傳輸。

11.一種用于對全向視頻進行編碼的系統，包括：

處理器，用于執行指令；以及

存儲器，用于存儲指令，當所述指令由所述處理器執行時，配置所述系統提供包括以下步驟的方法：

接收球形全向視頻數據；

將所述球形全向視頻數據的幀分割成北極分段、南極分段和至少一個連接分段，其中，所述北極分段通過將所述球形全向視頻數據的所述幀的頂部球形圓頂部分映射到圓上而形成，所述南極分段通過將所述球形全向視頻數據的所述幀的底部球形圓頂部分映射到圓上而形成，以及所述至少一個連接分段通過將所述球形全向視頻數據的所述幀的、連接所述頂部球形圓頂部分和所述底部球形圓頂部分的球形連接部分映射到至少一個矩形上而形成；

將所述北極分段、所述南極分段和所述至少一個連接分段堆疊在一起，以形成對應于所述球形全向視頻數據的所述幀的二維(2D)幀；以及

對所述2D幀進行編碼。

12.根據權利要求11所述的系統，其中所述指令還將所述系統配置為：

將所述球形全向視頻數據的多個幀分割成多個北極分段、多個南極分段和多個連接分段；

將所述多個北極分段、所述多個南極分段和所述多個連接分段堆疊成多個2D幀；以及

對所述多個2D幀進行編碼。

13.根據權利要求11所述的系統，其中，所述至少一個連接分段包括多個連接分段，每個所述連接分段將所述球形連接部分的一部分映射到相應的矩形上。