[發明專利]定向內插和數據后處理

無效

• 申請號: 201080013000.5
• 申請日: 2010-04-20
• 公開（公告）號: CN102450010A
• 公開（公告）日: 2012-05-09
• 發明（設計）人: 亞歷山德羅斯·圖拉皮斯;阿薩納西奧斯·萊昂塔里斯;佩沙拉·V·帕哈拉瓦達;凱文·J·斯特茨
• 申請（專利權）人: 杜比實驗室特許公司
• 主分類號: H04N7/26
• 分類號: H04N7/26
• 代理公司: 北京集佳知識產權代理有限公司 11227
• 代理人: 朱勝;李春暉

版權通知

該專利文獻的公開內容的一部分包含受版權保護的材料。版權所有者不反對任何人對專利文獻或專利公開內容的拓制，正如其在專利和商標局專利文件中所發表或記錄的，但是無論如何保留所有的版權權利。

對相關申請的交叉引用

該申請要求2009年4月20日提交的美國專利臨時申請第61/170,995號的優先權，其全部內容通過引用合并于此。

技術領域

本發明涉及內插和后處理。

背景技術

在許多環境和應用中，信號的分辨率可能需要做出讓步。例如，這可以用來減小表示信號所需的帶寬，降低解碼復雜度，適合特定顯示裝置的特性等。也可以在多個域/維度中指定信號的分辨率。在視頻信號的情況下，其中，這可以包括空間(即，水平和垂直)分辨率、時間分辨率、位深度以及甚至立體信息。在許多情況下，可以使一個維度的分辨率做出讓步以有利于另一維度的分辨率，例如，在交織視頻信號的情況下，犧牲空間分辨率以有利于時間分辨率。對于三維應用，一個讓步是使用多種布置在空間上降低采樣，并且然后對可用的立體視圖進行復用。降低采樣可以是基于水平的、垂直的或者甚至梅花(quincunx)的，而數據可以被打包或交織在一起，即，使用棋盤復用(checkerboard?multiplexing)。

發明內容

本發明人已認識到，在給定轉換處理具有關于內容的原始性質和特性的較少信息或沒有該信息的情況下，用于規模縮小的或者做出讓步的視頻和其它數據的重構的當前方法可能在性能方面嚴重受限，或者在復雜度方面受到約束。

在各個實施例中，本發明提供了將規模縮小或者做出讓步的視頻或其它數據重構回其原始的或者甚至更高的/不同的分辨率或格式。例如，720p(1280×720)分辨率的視頻可被(或者可能需要被)向上轉換為1080p(1920×1080)分辨率以顯示在更高分辨率的顯示器上。類似地，包括以棋盤布置復用的兩個梅花采樣的視圖的三維信號或者包括以并排布置打包的兩個水平或梅花采樣的視圖的三維信號可能需要被向上轉換為兩個全分辨率三維視圖或者不同的采樣布置(諸如逐行)。

圖9是示例性梅花采樣技術的圖示，其中，例如，由濾波器/函數/轉換f(x)920對全分辨率圖像(例如，立體圖形圖像對的左視圖)進行操作并且然后由采樣器930對其進行梅花采樣。結果是例如如940處所示的樣本圖案。(像素數據的)樣本圖案然后可與另一梅花采樣的圖像(例如，立體對的右視圖)或者可能的另一視圖或者甚至不相關的圖像進行復用，并且然后被編碼。處理也可以應用于使用不同采樣和打包方法(諸如并排打包的水平采樣或者逐行或者上下打包的垂直采樣)的圖像。

轉換處理可以使用多種算法來進行，包括例如可分離的或不可分離的濾波器、邊緣自適應內插方法等中的任意一個或多個，轉換處理在各個實施例中可能還需要信號的分析和表征。

圖10是根據本發明的實施例的用于梅花采樣數據的內插器的圖示。該處理與其它采樣和打包方法類似。如圖10所示，比特流1005被提供到對采樣圖像1080(在該示例中為梅花采樣圖像)進行解碼的解碼器1050，該采樣圖像1080然后被應用于一系列濾波操作1085中的每個。濾波操作1085可包括任意的時間、空間或其它向上轉換處理或者此處針對采樣圖像的向上轉換、誤差校正、顏色校正或者一般改進中的任意類型而描述的任意其它處理。要用于任意特定的像素或區域的濾波操作例如由元數據提取器1070從比特流1005提取的元數據來指定。結果是例如圖像的全分辨率版本1090。

在要投射的立體圖像對的情況下，定向濾波操作可包括顏色校正，以使得左圖像和右圖像的相應部分中的顏色與指導者的意圖一致。在這樣的實施例/應用中，在使用不同顏色的光源或濾波器的投射系統中顏色校正尤其重要，以使得左圖像和右圖像的顏色如所期望的匹配。