[發(fā)明專利]一種雙目立體視頻幀率轉換方法及裝置

有效

• 申請?zhí)枺?/td>: 201110233874.8
• 申請日: 2011-08-15
• 公開（公告）號: CN102271269A
• 公開（公告）日: 2011-12-07
• 發(fā)明（設計）人: 季向陽;張永兵;王好謙;戴瓊海
• 申請（專利權）人: 清華大學
• 主分類號: H04N13/00
• 分類號: H04N13/00;H04N7/26
• 代理公司: 北京清亦華知識產(chǎn)權代理事務所(普通合伙) 11201
• 代理人: 張大威

技術領域

本發(fā)明涉及圖像及視頻處理領域，特別涉及一種雙目立體視頻幀率轉換方法及裝置。

背景技術

近年來，隨著三維立體應用的普及，對立體圖像和視頻的研究開始成為熱點。立體視頻技術(也稱3D視頻技術)是未來多媒體技術的發(fā)展方向，立體視頻能夠提供立體感的新型視頻技術。與單通道視頻相比，立體視頻一般有兩個視頻通道，數(shù)據(jù)量要遠遠大于單通道視頻。立體視頻可以提供人類視覺能感受到的立體感。與圖像和視頻相關的應用也在不斷拓寬，例如：數(shù)字電視廣播、視頻點播、遠程教育與醫(yī)療、無線多媒體通信等。

雙目立體視頻是各種立體視頻應用中最為典型的一個，只需要提供兩個視角的視頻信息就能給用戶帶來立體的視覺感受。相對單目視頻而言，由于雙目立體視頻的數(shù)據(jù)量翻倍，從而給采集和存儲設備帶來了一定的困難。雖然可以通過采集較低的幀率的圖像，減輕數(shù)據(jù)采集和存儲的壓力，但是低幀率的圖像的質(zhì)量不高，影響用戶的觀感。

發(fā)明內(nèi)容

本發(fā)明的目的旨在至少解決上述技術缺陷之一。

為此，本發(fā)明的第一個目的在于提出了一種雙目立體視頻幀率轉換方法，該方法通過視差向量估計和運動向量估計，聯(lián)合利用時域和視間的信息，生成具有高質(zhì)量的幀率的上采樣視頻。

本發(fā)明的第二個目的在于提出了一種雙目立體視頻幀率轉換裝置。

為實現(xiàn)上述目的，本發(fā)明第一方面的實施例提出了一種雙目立體視頻幀率轉換方法，包括如下步驟：

輸入雙目立體視頻流，其中，所述雙目立體視頻流包括左視角視頻流和右視角視頻流，所述左視角視頻流包括多幀左視圖，所述右視角視頻流包括多幀右視圖；

分別對所述左視角視頻流和所述右視角視頻流進行聯(lián)合視差-運動估計，得到所述左視角視頻流的最優(yōu)運動矢量和所述右視角視頻流的最優(yōu)運動矢量；

利用所述左視角視頻流的最優(yōu)運動矢量和所述右視角視頻流的最優(yōu)運動矢量進行運動補償以對所述左視角視頻流和所述右視角視頻流進行上采樣。

根據(jù)本發(fā)明實施例的雙目立體視頻幀率轉換方法，通過對左視角視頻流和右視角視頻流進行視差矢量估計和運動矢量估計，聯(lián)合利用時域和視間的信息，從而可以生成具有高質(zhì)量的幀率的上采樣視頻。

本發(fā)明第二方面的實施例提出了一種雙目立體視頻幀率轉換裝置，包括：輸入模塊，所述輸入模塊用于輸入雙目立體視頻流，其中，所述雙目立體視頻流包括左視角視頻流和右視角視頻流，所述左視角視頻流包括多幀左視圖，所述右視角視頻流包括多幀右視圖；聯(lián)合視差-運動估計模塊，所述聯(lián)合視差-運動估計模塊與所述輸入模塊相連，用于分別對所述左視角視頻流和所述右視角視頻流進行聯(lián)合視差-運動估計，得到所述左視角視頻流的最優(yōu)運動矢量和所述右視角視頻流的最優(yōu)運動矢量；運動補償模塊，所述運動補償模塊與所述聯(lián)合視差-運動估計模塊相連，用于利用所述左視角視頻流的最優(yōu)運動矢量和所述右視角視頻流的最優(yōu)運動矢量進行運動補償以對所述左視角視頻流和所述右視角視頻流進行上采樣。

根據(jù)本發(fā)明實施例的雙目立體視頻幀率轉換裝置，通過對左視角視頻流和右視角視頻流進行視差矢量估計和運動矢量估計，聯(lián)合利用時域和視間的信息，從而可以生成具有高質(zhì)量的幀率的上采樣視頻。

本發(fā)明附加的方面和優(yōu)點將在下面的描述中部分給出，部分將從下面的描述中變得明顯，或通過本發(fā)明的實踐了解到。

附圖說明

本發(fā)明上述的和/或附加的方面和優(yōu)點從下面結合附圖對實施例的描述中將變得明顯和容易理解，其中：

圖1為根據(jù)本發(fā)明實施例的雙目立體視頻幀率轉換方法的示意圖；

圖2為根據(jù)本發(fā)明實施例的聯(lián)合視差-運動估計的示意圖；

圖3為圖2中的視差矢量估計的示意圖；

圖4為圖2中的運動矢量估計的示意圖；

圖5為根據(jù)本發(fā)明實施例的雙目立體視頻幀率轉換裝置的示意圖。

具體實施方式

下面詳細描述本發(fā)明的實施例，所述實施例的示例在附圖中示出，其中自始至終相同或類似的標號表示相同或類似的元件或具有相同或類似功能的元件。下面通過參考附圖描述的實施例是示例性的，僅用于解釋本發(fā)明，而不能解釋為對本發(fā)明的限制。

下面參考圖1至圖4描述根據(jù)本發(fā)明實施例的雙目立體視頻幀率轉換方法。該方法可以廣泛應用于圖像/視頻處理過程中。

如圖1所示，本發(fā)明實施例提供的雙目立體視頻幀率轉換方法，包括如下步驟：

S101：輸入雙目立體視頻流。