[發明專利]利用視圖合成預測編碼或解碼三維或多視圖視頻的方法以及裝置

有效

• 申請號: 201410496046.7
• 申請日: 2014-09-24
• 公開（公告）號: CN104284194B
• 公開（公告）日: 2018-11-23
• 發明（設計）人: 張賢國;張凱;安基程;林建良
• 申請（專利權）人: 寰發股份有限公司
• 主分類號: H04N19/597
• 分類號: H04N19/597;H04N19/176;H04N19/593;H04N19/154
• 代理公司: 北京市萬慧達律師事務所 11111
• 代理人: 白華勝

本發明提出一種利用視圖合成預測編碼或解碼三維或者多視圖視頻的方法以及裝置。其中，上述利用視圖合成預測編碼或解碼三維或者多視圖視頻的方法包括接收與相關視圖中的當前紋理區塊有關的輸入數據，利用取得視差向量定位與上述前紋理區塊有關的參考視圖中的深度區塊；利用上述深度區塊取得上述前紋理區塊的單一分區決定；根據上述單一分區決定將上述當前紋理區塊的每個上述分區區塊分割為多種子區塊。本發明提供的利用視圖合成預測編碼或解碼三維或多視圖視頻的方法以及裝置可有效地降低分區復雜度，提供規則的存儲器存取。

技術領域

本發明有關于一種三維視頻編碼，以及特別有關于一種三維編碼系統中視圖合成預測(view synthesis prediction,VSP)的優化方法。

背景技術

三維(three-dimensional,3D)立體電視為近幾年科技發展的趨勢，其目的為帶給觀眾驚艷的視覺體驗。目前已開發各種技術用以致能3D立體視圖，且多重視圖視頻為3D立體電視主要技術。由于所有攝影機從不同視圖捕捉同一場景，因此多重視圖視頻包括大量的視圖冗余。而為了利用視圖冗余，3D編碼工具，例如視圖合成預測已被整合至常用的3D高效率視頻編碼(High Efficiency Video Coding,HEVC)或者3D高階編碼(Advanced VideoCoding,AVG)。

圖1說明了3D高效率視頻編碼測試模組(3D-HEVC Test Model,3DV-HTM)中VSP的基本概念。視圖合成預測定位參考視圖的重構深度數據(reconstructed depth data)，并將其作為當前預測單元(prediction unit,PU)的虛擬深度。相鄰區塊視差向量(Neighboring Block Disparity Vector,NBDV)用于定位重構深度數據。在圖1中，對相關紋理圖像(dependent texture picture)110中的當前預測單元112進行編碼。確認相鄰區塊的視差向量130，其中視差向量130指向參考深度圖像120中的區塊124。接著，當前預測單元利用視差向量130’定位參考深度圖像120中所對應的參考深度區塊122。參考深度區塊122用于作為當前預測單元112的虛擬深度區塊。接著，根據預測單元中每個8x8分區的虛擬深度所取得的視差向量產生預測信號。從虛擬深度區塊所取得的視差值用于定位參考紋理圖像中所對應的參考樣本。舉例來說，當前紋理區塊112中的三個樣本根據各自的視差向量(如箭頭150a-c所示)映射至參考紋理圖像140中的三個樣本。映射過程稱為逆向映射(backward warping)。

Shimizu揭露視圖合成預測的自適應區塊分割方法(題目為Adaptive blockpartitioning for VSP發表于在聯合合作小組有關ITU-T SG16WP3及ISO/IEC JTC1/SC29/WG11的3D視頻編碼擴展的第5次會議:維也納,奧地利,2013年7月27日-8月2日,檔案號:JCT3V-E0207)。在JCT3V-E0207中，如圖2所示，32x32的預測單元中每個8x8的區塊可單獨分割為兩個8x4的分區或者兩個4x8的分區。預測單元中每個8x8的區塊根據下列算式引發判斷過程以選取8x4的分區或者4x8的分區：

If(vdepth[TL]<vdepth[BR]？0:1)^(vdepth[TR]<vdepth[BL]？0:1),

使用4x8partition；

Else,

使用8x4partition,