[發明專利]使用可縮放的視頻編碼的多視圖視頻編碼

有效

• 申請號: 200680038459.4
• 申請日: 2006-10-17
• 公開（公告）號: CN101292538A
• 公開（公告）日: 2008-10-22
• 發明（設計）人: 尹澎;克里斯蒂娜·戈米拉;蘇野平
• 申請（專利權）人: 湯姆森特許公司
• 主分類號: H04N7/50
• 分類號: H04N7/50;H04N7/26
• 代理公司: 北京市柳沈律師事務所
• 代理人: 史新宏

相關申請的交叉引用?

本申請要求于2005年10月19日申請的美國臨時申請序列號60/728,141，并且名為“METHOD?AND?APPARATUS?FOR?STEREOSCOPICVIDEO?USING?SCALABLE?VIDEO?CODEC”的權益，其作為參考資料整體結合在此處。?

技術領域

本發明通常涉及視頻編碼和解碼，尤其是，涉及使用可縮放的視頻編碼用于多視圖視頻編碼(MVC)的方法和裝置。?

背景技術

也稱為三維的(3-D)視頻的立體視頻對于顯示的圖像生成深度感。一種用于生成深度感的方法是顯示兩個不同的二維(2-D)圖像，這里每個圖像代表相同目標的兩個視角，類似于兩個眼睛自然地以雙眼視覺接收的視角。?

對于在市場上抵達的許多高質量的立體顯示，所希望的是提供一種借助于出眾的編碼效率和借助于合理的編碼復雜度用于立體視頻的壓縮解決方案。?

近年來，已經非常努力地設計了用于壓縮立體視頻經濟而有效的方法。常規的單體壓縮方法可以獨立地適用于立體圖像對的左和右視圖。但是，如果采用在視圖之間的高相關，可以實現較高的壓縮比。?

對于其中立體圖像對的兩個視圖被編碼的現有技術方法，多視圖分布(profile)(MVP)在國際標準化組織/國際電子技術委員會(ISO/IEC)活動圖像專家組-2(MPEG-2)標準中定義以傳送一對視頻信號。MVP依靠多層的信號表示方法，使得一個視圖(通常左側視圖)分配給基層，并且另一個視圖分配給增強層。具有與主分布(MP)相同的工具的單體編碼被施加于該基層。該增強層被使用時間的可縮放性工具以及運動和視差場的混合預測來編碼。?

在與國際標準化組織/國際電子技術委員會(ISO/IEC)活動圖像專家組?-4(MPEG-4)部分10改進的視頻編碼(AVC)標準/國際電信聯盟-電信組(ITU-T)H.264標準(在下文中為“MPEG4/H.264標準”或者簡單地“H.264標準”)有關的現有技術方法中，立體視頻編碼可以以二種不同的方式執行：(i)作為交錯的圖像編碼的特定情況，這里特定的奇偶性的所有場分配給左視圖，并且反奇偶性的所有場被考慮是立體視圖內容的右視圖；或者做為選擇(ii)通過從左和右視圖交替幀以生成一個單體視頻序列。立體視覺輔助的增強信息(SEI)消息將是否編碼的視頻序列代表立體內容的表示提供給解碼器，并且其方法被用于編碼相應的內容。?

這些先前巳知的方法需要對現有的單體編碼技術的最小化修改。但是，它們示出用于降低在立體對中的兩個視圖之間存在的冗余有限的能力。因此，當與一個單體視圖的編碼相比的時候，立體視圖的編碼導致很大的開銷。這個問題已經阻止用戶以有限的傳輸帶寬應用立體視覺的推廣。?

其它的現有技術方法包括對于一個視圖加上一些“額外的三維信息”執行編碼的方法。這種更加常規和簡單的編碼立體內容的方法是編碼一個單個的視圖加上一些額外的三維信息，允許接收機去再現該立體對的第二視圖。傳統地，傳送的三維信息是由深度和/或奇偶性圖表示的。深度圖包括三維場景的二維圖像表示，每個像素被分配一個深度值。在像素值方面的差值對應于在三維場景中的深度方面的差值。通常，深度數據被作為亮度信道唯一的視頻流編碼。?

在MPEG-部分2中，視頻目標語法包括所謂的多個輔助組分(MAC)，其被使用運動補償的DCT作為灰度級圖像編碼。視頻目標的運動矢量將用于其輔助組分的運動補償。輔助組分的一個應用是代碼深度或者視差圖數據。但是，存在輔助組分必須具有與視頻目標的亮度分量一樣大小的限制。與MPEG-2MVP相比，先前的方法示出一個改進的性能。但是，因為MPEG-4部分10的出眾的編碼增益和建議的面向目標的編碼方法的高的復雜度，MPEG-4部分2標準沒有成功地在行業中采用。?

發明內容

現有技術的這些和其它的缺點和弊病由本發明闡明，本發明提出一種使用可縮放的視頻編碼用于多視圖視頻編碼(MVC)的方法和裝置。?

按照本原理的一個方面，提供了一種可縮放的視頻編碼器。該可縮放的?視頻編碼器包括編碼器，使用來自對應于特定的視圖和至少一個其它視圖的至少一個的下層的預測，通過編碼作為基層的至少兩個視圖的特定的視圖，和編碼作為增強層的至少兩個視圖的至少一個其它視圖的每個，用于編碼對應于多視圖視頻內容的至少兩個視圖。至少兩個視圖被基于從時間的、空間的和信噪比可縮放性技術的至少兩個之中的選擇而編碼。?