[發明專利]沉浸媒體內容隨用戶移動變化的方法及系統

有效

• 申請號: 201811108139.2
• 申請日: 2018-09-21
• 公開（公告）號: CN110944222B
• 公開（公告）日: 2021-02-12
• 發明（設計）人: 徐異凌;王延峰;黃倩;謝紹偉;管云峰
• 申請（專利權）人: 上海交通大學
• 主分類號: H04N21/41
• 分類號: H04N21/41;H04N21/6587;H04N13/344
• 代理公司: 上海漢聲知識產權代理有限公司 31236
• 代理人: 莊文莉

本發明提供了一種沉浸媒體內容隨用戶移動變化的方法及系統，包括：讀取并解析視頻流；確定視點個數、初始視點、視點間的相對關系以及每個視點的最大覆蓋半徑值；根據用戶的位置反饋用戶對于初始視點的相對位移；根據視點間的相對關系、每個視點的最大覆蓋半徑值以及相對位移選擇當前視點；根據相對位移確定當前的深度值，根據視點內視野和深度的關系確定當前視點的觀看視野內容；呈現視頻流中與觀看視野內容相應的內容。本發明支持用戶觀看區域與當前視點相對初始視點成一定關系變化，同時支持不同視點切換。

技術領域

本發明涉及多媒體技術領域，具體地，涉及沉浸媒體內容隨用戶移動變化的方法及系統。

背景技術

隨著虛擬現實(Virtual Reality，VR)技術的快速發展，VR系統的需求增加，正在實現從三自由度(3 Degree of Freedom，3DoF)到三自由度加(3Degree of Freedom+，3DoF+)到六自由度(6 Degree of Freedom，6DoF)的發展，3DoF支持用戶頭部進行Yaw、Roll、Pitch(即偏航角、翻滾角、俯仰角)三種旋轉，3DoF+在3DoF的基礎上支持用戶頭部進行X、Y、Z軸的上下左右前后六個方向小范圍的平移運動，6DoF則不僅能像3DoF一樣進行Yaw、Roll、Pitch三種旋轉，還可以追蹤用戶在X、Y、Z軸上的平移。技術上來說，VR視頻應該在現有三自由度(3 Degree of Freedom，3DoF)的基礎上增加深度信息，支持場景隨著用戶移動發生相應改變，也就是說用戶戴著VR頭部顯示器朝任意方向移動時VR都會做出相應的反應，以使用戶獲得更好的沉浸式體驗。

現在，對于沉浸媒體內容的檢測和標識是判斷用戶沉浸體驗感的重要指標，為了滿足不同應用場景的需求，需要對沉浸媒體內容的反饋和封裝信息進行額外的標識來滿足特定信息的進一步應用。

發明內容

針對現有技術中的缺陷，本發明的目的是提供一種沉浸媒體內容隨用戶移動變化的方法及系統。

根據本發明提供的一種沉浸媒體內容隨用戶移動變化的方法，包括：

解析步驟：讀取并解析視頻流；

視點確定步驟：確定視點個數、初始視點、視點間的相對關系以及每個視點的最大覆蓋半徑值；

位移反饋步驟：根據用戶的位置反饋用戶對于初始視點的相對位移；

視點選擇步驟：根據視點間的相對關系、每個視點的最大覆蓋半徑值以及相對位移選擇當前視點；

觀看視野內容確定步驟：根據相對位移確定當前的深度值，根據視點內視野和深度的關系確定當前視點的觀看視野內容；

視頻呈現步驟：呈現視頻流中與觀看視野內容相應的內容。

較佳的，所述視點間的相對關系包括：以初始視點為坐標原點建立坐標系，確定初始視點以外的視點的坐標。

較佳的，所述用戶相對位移包括：用戶移動的x坐標信息、y坐標信息、z坐標信息。

較佳的，所述深度值為用戶的位置相對當前視點的距離。

根據本發明提供的一種沉浸媒體內容隨用戶移動變化的系統，包括：

解析模塊：讀取并解析視頻流；

視點確定模塊：確定視點個數、初始視點、視點間的相對關系以及每個視點的最大覆蓋半徑值；

位移反饋模塊：根據用戶的位置反饋用戶對于初始視點的相對位移；

視點選擇模塊：根據視點間的相對關系、每個視點的最大覆蓋半徑值以及相對位移選擇當前視點；

觀看視野內容確定模塊：根據相對位移確定當前的深度值，根據視點內視野和深度的關系確定當前視點的觀看視野內容；