[發明專利]視頻編碼的方法、裝置、電子設備及存儲介質有效

申請號：	202010588984.5	申請日：	2020-06-24
公開（公告）號：	CN112153391B	公開（公告）日：	2022-07-29
發明（設計）人：	崔秉斗;文格爾史蒂芬;劉杉;索達加伊拉吉	申請（專利權）人：	騰訊美國有限責任公司
主分類號：	H04N19/597	分類號：	H04N19/597;H04N19/593;H04N19/503;H04N19/91;H04N19/186;H04N19/82
代理公司：	北京德琦知識產權代理有限公司 11018	代理人：	董晶;王琦
地址：	美國加利福尼亞州***	國省代碼：	暫無信息
權利要求書：	查看更多	說明書：	查看更多
摘要：
搜索關鍵詞：	視頻編碼方法裝置電子設備存儲介質
鉆瓜網技術展會專利詞庫專利權人專利榜在售專利公布日期熱門專利

【說明書】：

本申請實施例提供一種視頻編碼的方法、裝置、電子設備及存儲介質，所述方法包括：獲取至少一個視覺三維場景的體積數據；將體積數據轉換為點云數據；將點云數據投影到二維圖像上；對投影到二維圖像上的點云數據進行編碼；以及組成媒體文件，所述媒體文件封裝了元數據和已編碼的點云數據，所述元數據指示六自由度媒體。

交叉引用

本申請要求于2019年6月28日在美國專利和商標局提交的第US62/868,797號臨時申請以及2020年6月23日在美國專利和商標局提交的第16/909,314號美國專利申請的優先權，其全部內容通過引用結合在本申請中。

技術領域

本公開涉及一組高級視頻編碼技術，包括點云數據的觀察位置(View-position)和角度相關處理(Angle dependent processing)的改進方案。

背景技術

在不允許針對其他維度的有效流式傳輸的情況下，虛擬現實的流式傳輸，例如圖像和音頻的流式傳輸，會將用戶的觀看體驗限制為一種全景圖像的體驗，全景圖像的體驗允許該用戶在x軸、y軸、z軸環境下從不同角度觀看圖像的不同部分，該全景圖像類似于三維圖像，而所述其他維度可以使用戶除了在這些位置中的至少一個位置處的不同角度觀看之外，還可以從前/后、上/下和左/右的不同的觀察位置來體驗這種虛擬現實。

因此，現有技術中除了x軸、y軸、z軸環境下的不同角度的流式傳輸外，不允許其他維度的有效流式傳輸，也即用戶無法從前/后、上/下和左/右的不同的觀察位置來體驗這種虛擬現實，而用戶從多個維度體驗虛擬現實會造成全景視頻和/或圖像數據量增大，進而造成全景視頻系統的處理效率低下，針對此類問題亟需對應的技術方案來解決。

發明內容

本申請實施例包括一種視頻編碼的方法、裝置、電子設備及存儲介質。

本申請實施例提供的視頻編碼的方法，包括：獲取至少一個視覺三維3D場景的體積數據；將所述體積數據轉換為點云數據；將所述點云數據投影到二維2D圖像上；對投影到所述2D圖像上的所述點云數據進行編碼；以及組成媒體文件，所述媒體文件封裝了元數據和已編碼的所述點云數據，所述元數據指示六自由度6DoF媒體。

本申請實施例提供的視頻編碼的裝置，包括：

選擇模塊，用于獲取至少一個視覺三維3D場景的體積數據；

轉換模塊，用于將所述體積數據轉換為點云數據；

投影模塊，用于將所述點云數據投影到二維2D圖像上；

編碼模塊，用于對投影到所述2D圖像上的所述點云數據進行編碼；以及

組成模塊，用于組成媒體文件，所述媒體文件封裝了元數據和編碼的所述點云數據，所述元數據指示六自由度6DoF媒體。

本申請實施例還提供一種非易失性計算機可讀存儲介質，所述存儲介質存儲有多條指令，可以使至少一個處理器執行本申請實施例所述的方法。

本申請實施例還提供一種電子設備，包括存儲器、處理器及存儲在存儲器上并可在處理器上運行的計算機程序，所述處理器執行所述程序時實現本申請實施例所述的方法。

通過本申請實施例的技術方案，可以對點云數據的特定部分而進行更有效的處理，使得播放器可聚焦于點云數據中比其它部分更高質量的圖像，而不傳送未被使用的部分，進而提高全景視頻系統的效率。