[發明專利]3D視頻處理

無效

• 申請號: 201080013113.5
• 申請日: 2010-03-04
• 公開（公告）號: CN102362503A
• 公開（公告）日: 2012-02-22
• 發明（設計）人: S·洪;S·N·胡利亞卡
• 申請（專利權）人: ATI技術無限責任公司;先進微裝置公司
• 主分類號: H04N13/02
• 分類號: H04N13/02;G06T7/20
• 代理公司: 北京戈程知識產權代理有限公司 11314
• 代理人: 程偉;王錦陽

技術領域

本發明大體有關于視訊處理，且更特別的是，有關于用以處理3D 視訊的方法及設備。

背景技術

目前3D的內容是基于影片源，其速率為24幀/秒。電視廣播有50Hz 或60Hz的刷新速率。為了轉換電視廣播的影片源，需要轉換幀率。這 通常用幀率轉換(FRC)處理來實現。

幀率轉換影片源至60Hz刷新速率的方法之一是用2:3的降頻 (pulldown)，其中系顯示第一幀兩次以及顯示第二幀三次。對于影片 源中的每一對幀都重復此事。由于電視的幀率跟影片的不同，在2:3 降頻期間會有移動影像抖動(motion?judder)問題(亦即，觀看者可察 覺到影像內的移動不平順)。

遮擋問題(Occlusion?problem)

FRC處理的輸出為放在相繼源幀之間的新(中間)幀。如果有關于背 景中被遮擋或隱藏對象的遺失信息，新幀可能會有問題。如果有遺失 信息，FRC無法準確地產生中間幀。這被稱作遮擋問題。如果中間幀由 移動估計(決定移動矢量)及移動補償(應用該移動矢量以減少移動的 效應)產生，亦即，藉由FRC處理，則可能產生一些無關緊要的影像。 這個問題在2D影像及3D影像都存在，在此隱藏材料可能在左影像， 右影像，或兩者。

圖1圖示遮擋區的例子，圖中有5幀-當前幀(N)，兩個先前幀(N-2， N-1)，以及兩個后續幀(N+1，N+2)。在正常的FRC下，遮擋區顯示沒 有良好的匹配移動矢量。如果在均勻的區域有移動矢量場間斷點，這 可能導致潛在的遮擋區，因為間斷點會造成無法估計正確的移動矢量。 藉由比較幀N-2與N-1、幀N-1與N+1之間的移動矢量，無法檢測由遮 擋所致的移動矢量間斷點。為了能夠正確地處理遮擋區，將需要5個 以上的連續數據幀，這導致解決方案更復雜。

因此，在轉換影片源時有必要減少抖動，特別是3D影片源。也有 需要處理3D源的遮擋問題。

發明內容

抖動問題的處理可藉由將3D影像分成左影像及右影像兩個分量， 對于該等個別影像執行FRC，然后重新排序該等影像供顯示。該分離及 FRC處理可顛倒，因為對于3D影像可執行FRC，以及可將原始及移動 補償影像分成左、右影像兩個分量。

處理3D源之遮擋問題的方法之一是利用像差信息(左影像與右影 像的差異)來幫忙產生隱藏信息。

附圖說明

由以下舉例說明及結合附圖的詳細描述可更加了解本發明。

圖1舉例圖示遮擋區；

圖2圖示用以執行3D輸入源之FRC的方法流程圖；

圖3舉例圖示圖2之方法的應用；

圖4圖示用以執行3D輸入源之FRC的另一方法流程圖；

圖5舉例圖示圖4之方法的應用；

圖6圖示用以執行2D至3D轉換的方法流程圖；

圖7舉例圖示圖6之方法的應用；

圖8圖示用以執行2D至3D轉換的另一方法流程圖；

圖9舉例圖示圖8之方法的應用；

圖10的方塊圖圖示經組態成可執行圖2、圖4、圖6及圖8之方 法中之任一的設備；

圖11圖示3D影像如何協助處理遮擋問題；

圖12舉例圖示觀看者看3D影像時左眼、右眼的像差；

圖13圖示如何利用像差可得到3D影像的背景信息；以及

圖14圖示用以處理遮擋問題的方法流程圖。

具體實施方式

減少抖動問題的方法之一是經由適當地應用FRC。這可藉由在FRC 處理期間利用移動估計及移動補償來達成。以3D輸入源而言，對于3D 視訊幀的左影像及右影像都需要做移動估計及移動補償。在處理期間 的某一時刻需要分開左影像及右影像；分離可在FRC之前(如圖2及圖 3所示)或FRC之后(如圖4及圖5所示)發生。

應注意，這兩個方法的計算復雜度大約相同。以3D影像而言，左 影像、右影像的大小各為全幀的一半。處理(例如，執行FRC)尺寸較小 的影像比較容易，以及圖示于圖2的方法可能比圖4的方法還快完成。

分離，然后FRC