[發明專利]增強3D音頻/視頻處理裝置和方法

有效

• 申請號: 201380036875.0
• 申請日: 2013-07-09
• 公開（公告）號: CN104429063B
• 公開（公告）日: 2017-08-25
• 發明（設計）人: 丁商五;金慶鎬;全柄文
• 申請（專利權）人: LG電子株式會社
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N21/80
• 代理公司: 北京三友知識產權代理有限公司11127
• 代理人: 呂俊剛,劉久亮

技術領域

本發明涉及無線通信系統，并且更具體地說，涉及用于處理增強三維(3D)音頻和視頻數據的方法和裝置，并且更具體地說，涉及處理增強3D音頻/視頻數據，以利用MPEG文件格式(MPEG file format)執行用信號通知基于3D視頻深度來控制3D音頻深度的深度關聯信息的方法和裝置。

背景技術

隨著三維(3-Dimensional,3D)電視(TV)的廣泛使用，基于存儲介質的3D視頻內容和基于數字廣播的3D視頻內容傳輸已經快速得到廣泛使用。另外，基于3D效果的3D音頻內容不僅被廣泛應用于視頻內容而且應用于音頻內容。

隨著數字技術的日益增長的開發，用戶已經連續請求更精確的音頻/視頻(A/V)體驗。為最大化響應于用戶需求的A/V體驗(experience)，已經出現應用了能夠應用于普通家庭影院系統(Home Theater System,HTS)的立體聲(stereo sound)和環繞聲(surround sound)技術的先進聲音系統(advanced sound system)。

因為大部分TV或HTS具有兩個揚聲器，所以通常使用立體聲系統來向用戶提供聲音體驗。然而，因為高端(high-end)HTS具有兩個或更多個揚聲器，所以環繞聲系統已經被廣泛用于向用戶提供更柔和且精確的聲音體驗。

近來，已經密集討論了在3D聲音空間內再現方向和距離以生成3D聲音效果，由此提供3D聲音的3D音頻技術。在該3D音頻技術中，聲音再現被控制的最佳聽音位置(acoustic sweet spot)，即，用戶可以聽到最佳聲音的位置或范圍，可以是3D空間和用戶可聽聲音的某些部分。

另外，3D視頻技術和3D音頻技術可以分別應用至內容，并且針對同時應用了3D視頻技術和3D音頻技術的3D內容的需求在快速增加。即，盡管針對利用傳統3D視頻技術和傳統3D音頻技術來獨立地應用3D視頻效果和3D音頻效果的3D內容的需求在增加，但針對通過在3D視頻效果與3D音頻效果之間的同步而獲取的3D內容的需求在更快速增加。

發明內容

技術問題

本發明的目的是，提供處理增強3D音頻/視頻數據，其利用MPEG文件格式來執行用信號通知深度信息，以響應于3D視頻的深度來生成3D音頻效果，使得3D視頻效果與3D音頻效果同步的方法和裝置。

技術解決方案

本發明的目的可以通過提供一種增強(enhanced)三維(3D)音頻/視頻(A/V)處理方法來實現，該方法包括以下步驟：生成包括視頻內容和音頻內容的三維(3-Dimensional,3D)內容；生成構成所述視頻內容的視頻幀的深度信息，以及生成包括生成的所述3D內容和所述深度信息的3D增強信號。所述深度信息被用于生成要應用至所述音頻內容的3D音頻效果，所述深度信息包括幀標識信息、深度級(depthlevel)信息以及深度范圍(depth range)信息。所述幀標識信息指示用于標識每個視頻幀的幀號碼，所述深度級信息指示要應用至每個視頻幀的3D效果的程度，并且所述深度范圍信息指示所述深度級的總級數。

根據本發明的另一方面，一種增強(enhanced)三維(3-Dimensional,3D)音頻/視頻(A/V)處理方法，該方法包括以下步驟：處理包括3D內容的三維(3D)增強信號，該3D內容被構造成具有視頻內容和音頻內容；從處理的所述3D增強信號獲取構成所述視頻內容的視頻幀的深度信息；根據所獲取的所述深度信息生成3D音頻效果；以及基于所生成的所述3D音頻效果生成3D音頻內容。所述深度信息被用于生成要應用至所述音頻內容的3D音頻效果，所述深度信息包括幀標識信息、深度級(depth level)信息以及深度范圍(depth range)信息。所述幀標識信息指示用于標識每個視頻幀的幀號碼，所述深度級信息指示要應用至每個視頻幀的3D效果的程度，并且所述深度范圍信息指示所述深度級的總級數。

有益效果

如根據上面的描述明顯的是，該增強3D A/V裝置可以利用基于3D視頻深度的信令信息來生成3D聲音效果，使得其可以提供3D視頻數據和3D音頻數據被正確同步的3D內容。

根據本發明，該增強3D A/V裝置可以利用基于3D視頻深度的信令信息來生成3D聲音效果，從而降低裝置設計的復雜性。

根據本發明，當發送基于3D視頻深度的信令信息時，該增強3D A/V裝置去除冗余信息，并且發送除了該冗余信息以外的剩余信息，從而獲取較高的發送效率。

附圖說明

圖1是例示音頻系統的發展過程的概念圖。