[發明專利]信令傳輸使用3D視頻編碼的高效率視頻編碼擴展的變形圖

有效

• 申請號: 201410148296.1
• 申請日: 2014-04-14
• 公開（公告）號: CN104104938B
• 公開（公告）日: 2017-01-11
• 發明（設計）人: 奧吉薩·斯莫里克;尼考勞斯·斯蒂梵諾斯基
• 申請（專利權）人: 迪士尼企業公司
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N13/02;H04N13/04;H04N19/597;H04N21/2343;H04N21/4402
• 代理公司: 北京東方億思知識產權代理有限責任公司11258
• 代理人: 李曉冬

技術領域

人類通常使用立體視覺來觀看。觀看者的左眼和右眼各自感知到場景的稍微不同的視圖，并且觀看者的大腦將稍微不同的視圖融合成包括深度信息的單個圖像。深度信息允許觀看者感知到與場景中各種物體的相對距離。用單個攝像機拍攝的電影無法將這樣的深度信息提供給觀看者從而易于看起來像是平面的。

背景技術

3-D電影技術方面的早期努力使用了立體影片，其中相同場景的兩個圖像(在它們之間具有相對偏移)被重疊在單件電影膠片上，其中圖像經受互補濾色器(complimentary?color?filter)(例如，紅色和綠色)。觀看者戴上特殊眼鏡，這樣一個圖像將僅被左眼看見而另一個將僅被右眼看見。當觀看者的大腦融合兩個圖像時，結果是深度的錯覺。在二十世紀五十年代，“雙片”保護技術被廣泛地用來放映3-D電影。使用雙片保護技術，兩個膠片被同步并排地投射，其中來自每個投射儀的光被反向地偏振。觀看者戴上偏振眼鏡，每只眼僅將看見兩個圖像中的一個。最近，有源偏振已被用來區分左眼和右眼圖像。使用有源方向翻轉圓形偏光器(active?direction-flipping?circular?polarizer)按順序地投射左眼圖像和右眼圖像，其中，有源方向翻轉圓形偏光器對左眼幀和右眼幀應用相反圓形偏振。觀看者戴上對于每只眼具有相反固定的圓形偏光器的眼鏡，以便每只眼僅看見預定幀。多年來，用于投射3-D電影的各種其它系統也已被使用。

在電影院中和在家庭娛樂系統中的3-D電影的趨勢一直在增長。3-D電影可以使用立體技術來產生。立體技術從一對2-D圖像中創建深度的錯覺，其中的每一個2-D圖像都被呈現給觀看者的一只眼睛。該對2-D圖像可以呈現場景的兩個稍微不同的透視。稍微不同的透視可以類似于觀看者的眼睛的自然雙目視覺。通過分別將稍微不同的透視的2-D圖像呈現給觀看者的右眼以及左眼，觀看者可以感知到2-D圖像的三維合成，其中場景的某些物體看起來比場景的其它物體更靠近觀看者。也就是說，觀看者的大腦可以合并或者融合左眼和右眼圖像以創建深度的感知。

物體在圖像對中的偏移程度確定了物體被觀看者感知到所在的深度。當左眼圖像的位置或坐標與右眼圖像的位置或坐標交叉(例如，負視差)時，物體可能看起來朝觀看者突出并遠離中性面或屏幕突出。而當左眼圖像和右眼圖像的位置或坐標不交叉(例如，正視差)時，物體可能看起來遠離屏幕或者在屏幕后面。

對于電影來說，以立體拍攝(在真人電影的情況下)或者成像(在渲染動畫的情況下)以得到3-D觀看效果是日益常見的。用來產生立體視頻(stereoscopic?video或stereo?video)的圖像幀可以被稱為立體圖像。圖像幀(或簡單地稱為“幀”)指的是在特定時間點處的圖像。可以通過將多個每秒幀數(fps)(諸如二十四至三十個?fps)呈現給觀看者來實現運動的錯覺。幀可以包括用兩個或更多個攝像機所拍攝的真人電影的內容。幀還可以包括使用兩個攝像機位置所成像的渲染動畫的內容。在立體視頻中，通過將左眼圖像流和右眼圖像流呈現給觀看者來產生立體感知。

發明內容

在本公開中呈現的實施例提供了一種基于視頻編碼方案執行視圖生成的操作的方法、計算機可讀介質以及系統。操作包括接收基于視頻編碼方案所編碼的第一比特流。第一比特流包括視頻、一個或多個量化的變形圖偏移(warp?map?offset)，以及由視頻編碼方案所指定的預定義消息類型的第一消息。第一消息包含包括第一語法元素和第二語法元素的多個語法元素。操作還包括基于在第一消息中包括的第一語法元素將從第一比特流解碼的深度樣本解釋為包括量化的變形圖偏移的第一預定義深度格式；操作還包括基于從第一比特流解釋的一個或多個量化的變形圖偏移、并且進一步基于至少第二語法元素來生成一個或多個變形圖。操作還包括使用圖像域變形(warping)并且基于視頻和一個或多個變形圖來生成一個或多個視圖。