[發明專利]多視點視頻編碼/解碼方法和設備

有效

• 申請號: 200980156340.0
• 申請日: 2009-12-08
• 公開（公告）號: CN102308585A
• 公開（公告）日: 2012-01-04
• 發明（設計）人: 方健;嚴基紋;金泰源;張恩榮;許南淏;金鎮雄;李壽寅
• 申請（專利權）人: 韓國電子通信研究院
• 主分類號: H04N7/50
• 分類號: H04N7/50
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 李芳華

技術領域

本發明的示范實施例涉及一種多視點(multi-view)視頻編碼/解碼方法和設備，該方法和設備使用編碼和解碼的多視點視頻來對與所述多視點視頻對應的深度信息視頻進行編碼和解碼。

背景技術

近年來，已經進行了用于通過數字電視(DTV)來對多視點視頻進行廣播的研究。為了對與利用人眼所看到的真實視頻相似的多視點視頻進行廣播，應該創建和傳送多視點視頻。然后，應該通過顯示設備來接收和再現所述多視點視頻。然而，由于多視點視頻具有大量的數據，所以難以按照在當前的數字廣播系統中使用的信道的帶寬來接收多視點視頻。相應地，正在對用于對多視點視頻進行編碼和解碼的技術進行研究。

多視點視頻編碼(MVC)是一種以下技術，其對從具有不同視圖的多個相機獲取的多個視頻、以及與所述多個視頻對應的多個深度信息視頻(即，多視點視頻)進行編碼。針對同一對象，所述多個相機被布置為根據距離和方向上的預定規則而彼此間隔開。作為結果，在具有不同視圖并且組成多視點視頻的相應視頻之間存在高相關性。當恰當地使用相應視頻之間的高相關性時，可能顯著地改善MVC的編碼效率。然而，由于從同一對象反射的光可能取決于方向而彼此不同，所以可以考慮所述光以使編碼效率最大化。

正在積極地進行其標準化的MVC基于H.264/MPEG部分10高級視頻編碼(在下文中，稱作H.264/AVC)，該H.264/MPEG部分10高級視頻編碼是現有的國際運動圖像編碼標準。在MVC中，考慮多視點視頻的上述特性，以尋找一種用于改善編碼效率的方法。例如，將分級B畫面編碼處理應用于視圖內預測編碼，執行該分級B畫面編碼處理以支持在H.264/AVC中定義的聯合可伸縮視頻編碼(JSVC)中的時間可伸縮性。此外，與視圖內預測編碼并排地(side?by?side)執行視圖間預測編碼，以改善MVC中的編碼效率。相應地，研究三維(3D)視頻的關聯團體正在對通過DTV廣播進行的3D視頻的接收和傳送進行大量研究。當前，該研究正針對高清晰度(HD)立體視頻的傳送和接收。HD立體視頻是指具有1920×1080尺寸的隔行視頻或者具有1024×720尺寸的逐行視頻。

圖1是解釋了傳統的多視點視頻編碼/解碼系統的框圖。

參考圖1，傳統的多視點視頻編碼/解碼系統包括第一視頻編碼單元101、第一視頻解碼單元103、第一深度信息視頻編碼單元105、第一深度信息視頻解碼單元107、第二視頻編碼單元109、第二視頻解碼單元111、第二深度信息視頻編碼單元113、和第二深度視頻信息解碼單元115。

分別將第一和第二視頻以及第一和第二深度信息視頻輸入到第一和第二視頻編碼單元101和109以及第一和第二深度信息視頻編碼單元105和113。第一和第二視頻具有彼此不同的視圖，并且第一和第二深度信息視頻分別對應于所述第一和第二視頻，并包括深度信息。在傳統的多視點視頻編碼/解碼系統中，可以使用兩個或更多視頻，并且深度信息視頻的數目可以對應于視頻的數目。此時，可以使用具有不同視圖的視頻來對多視點視頻進行編碼。即，在多視點視頻之間存在高相關性。因此，當首先對第一視頻進行編碼時，第二視頻編碼單元109可以通過參考編碼的第一視頻來對第二視頻進行編碼?？梢园凑障嗤姆绞絹韺ι疃刃畔⒁曨l進行編碼。

將相應的編碼的視頻輸入到第一和第二視頻解碼單元103和111以及第一和第二深度信息視頻解碼單元107和115，并然后進行解碼。

二維(2D)視頻是通過對編碼的第一或第二視頻進行解碼所獲得的視頻，而3D視頻是通過對編碼的第一和第二視頻以及編碼的第一深度信息視頻進行解碼所獲得的視頻。第一視頻可以是具有參考視圖的視頻。多視點視頻是通過對編碼的第一和第二視頻以及編碼的第一和第二深度信息視頻進行解碼所獲得的視頻。

即，在傳統的多視點視頻編碼/解碼系統中，獨立地執行多視點視頻和深度信息視頻的編碼和解碼。

發明內容

技術問題

本發明的實施例針對一種多視點視頻編碼/解碼方法和設備，該方法和設備有效地對與多視點視頻對應的深度信息視頻進行編碼和解碼，由此有效地對該多視點視頻進行編碼和解碼。

可以通過以下描述來理解本發明的其他目的和優點，并且通過參考本發明的實施例，它們將變得明顯。同樣，對于本發明所屬技術領域的技術人員來說明顯的是，可以通過所要求保護的部件及其組合來實現本發明的目的和優點。

技術解決方案