[發明專利]用于編碼和解碼三自由度和體積式兼容的視頻流的方法和設備

在審

• 申請號: 201980046688.8
• 申請日: 2019-06-24
• 公開（公告）號: CN112400316A
• 公開（公告）日: 2021-02-23
• 發明（設計）人: J.弗勒羅;B.丘波;G.布里安德;R.多爾;T.塔皮;F.圖多
• 申請（專利權）人: 交互數字VC控股公司
• 主分類號: H04N13/161
• 分類號: H04N13/161;G06T15/20;H04N19/597
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 劉茵

1.一種生成表示3D場景的流的方法，所述方法包括：

-通過根據第一投影映射將所述3D場景中的從視點可見的點投影到第一顏色圖上來生成第一顏色數據，所述第一顏色數據是適于使能圍繞所述視點的3自由度的旋轉的渲染的顏色圖像；

-通過根據第二投影映射將所述3D場景中的從所述視點可見的點投影到第一深度圖上來生成第一深度數據；所述第一深度數據被編碼為打包在與第一補丁數據項列表相關聯的第一深度補丁圖譜中的補丁圖片，第一補丁數據項包括將深度補丁圖片與所述顏色圖像的像素區域進行映射的信息；

-生成表示所述3D場景中的從所述視點不可見的點的第二顏色數據和第二深度數據；以及

-在所述流中，將所述第一顏色數據編碼在第一語法元素中，并將所述第一深度數據、所述第二顏色數據和所述第二深度數據編碼在至少第二語法元素中。

2.根據權利要求1所述的方法，其中所述3D場景是以多視圖加深度(MVD)幀的形式獲得的，并且其中通過移除所述MVD幀的視圖中的、與所述3D場景中從所述視點可見的點相關聯的像素，來執行生成第二顏色數據和第二深度數據。

3.根據權利要求1所述的方法，其中通過根據第三投影映射將所述3D場景中的剩余點投影到第二顏色圖和第二深度圖上，來執行生成第二顏色數據和第二深度數據，所述剩余點是所述3D場景中的從所述視點不可見的點。

4.根據權利要求3所述的方法，其中所述第二顏色數據被編碼為打包在顏色補丁圖譜中的補丁圖片，并且其中所述第二深度數據被編碼為第二深度補丁圖譜中的補丁圖片并與第二補丁數據項列表相關聯，第二補丁數據項包括將深度補丁圖片與所述第二補丁圖譜的顏色補丁進行映射的信息。

5.一種用于將表示3D場景的數據編碼到流中的設備，所述設備包括存儲器，所述存儲器至少與被配置為執行以下操作的處理器相關聯：

-通過根據第一投影映射將所述3D場景中的從視點可見的點投影到第一顏色圖上來生成第一顏色數據，所述第一顏色數據是與使能圍繞所述視點的3自由度的旋轉的渲染兼容的顏色圖像；

-通過根據所述第二投影映射將所述3D場景中的從所述視點可見的點投影到第一深度圖上來生成第一深度數據；所述第一深度數據被編碼為打包在與第一補丁數據項列表相關聯的第一深度補丁圖譜中的補丁圖片，第一補丁數據項包括將深度補丁圖片與所述顏色圖像的像素區域進行映射的信息；

-生成表示點的第二顏色數據和第二深度數據，所述點是所述3D場景中的從所述視點不可見的點；以及

-在所述流中，將所述第一顏色數據編碼在第一語法元素中，并將所述第一深度數據、所述第二顏色數據和所述第二深度數據編碼在至少第二語法元素中。

6.根據權利要求5所述的設備，其中所述3D場景是以多視圖加深度(MVD)幀的形式獲得的，并且其中通過移除所述MVD幀的視圖中的、與所述3D場景中從所述視點可見的點相關聯的像素，來執行生成第二顏色數據和第二深度數據。

7.根據權利要求5所述的設備，其中通過根據第三投影映射將所述3D場景中的剩余點投影到第二顏色圖和第二深度圖上，來執行生成第二顏色數據和第二深度數據，所述剩余點是所述3D場景中的從所述視點不可見的點。

8.根據權利要求7所述的設備，其中所述第二顏色數據被編碼為打包在顏色補丁圖譜中的補丁圖片，并且其中所述第二深度數據被編碼為第二深度補丁圖譜中的補丁圖片并與第二補丁數據項列表相關聯，第二補丁數據項包括將深度補丁圖片與所述第二補丁圖譜的顏色補丁進行映射的信息。