[發(fā)明專利]視頻幀處理方法，視頻流播放方法及視頻幀記錄裝置

在審

• 申請?zhí)枺?/td>: 201210374771.8
• 申請日: 2012-09-29
• 公開（公告）號: CN103096008A
• 公開（公告）日: 2013-05-08
• 發(fā)明（設(shè)計）人: 朱啟誠;陳鼎勻;何鎮(zhèn)在
• 申請（專利權(quán)）人: 聯(lián)發(fā)科技股份有限公司
• 主分類號: H04N5/76
• 分類號: H04N5/76;H04N5/91;H04N5/232;H04N9/04;H04N21/472;H04N21/438
• 代理公司: 北京萬慧達知識產(chǎn)權(quán)代理有限公司 11111
• 代理人: 于淼;楊穎

【交叉引用】

本申請要求美國臨時申請案號為61/543906（2011年10月6日申請）及美國臨時申請案號為61/560411（2011年11月16日申請）的臨時申請案的優(yōu)先權(quán)。上述相關(guān)申請的內(nèi)容一并并入此案作為參考。

【技術(shù)領(lǐng)域】

本發(fā)明有關(guān)于視頻幀的處理，更具體來說，有關(guān)于處理具有圖像配準（image?registration）信息的視頻幀的方法及相關(guān)裝置。

【背景技術(shù)】

全景視頻（panoramic?video）是由描述周圍場景（surrounding?scene）的一系列全景視頻幀組成的視頻。因此，當全景視頻在顯示裝置上播放時，觀看者能夠?qū)χ車鷪鼍坝?60度視角（360-degree?view）。對于一般用戶而言，創(chuàng)建全景視頻內(nèi)容并不容易。目前已經(jīng)開發(fā)出用于產(chǎn)生全景視頻的多種不同系統(tǒng)。舉例來說，創(chuàng)建全景視頻的傳統(tǒng)方法可以分為四類，包括專業(yè)光學設(shè)備、同步攝像機（synchronized?cameras）、全景視頻紋理（texture）以及前景和背景分割（foreground?and?background?segmentation）。然而，每種傳統(tǒng)方法在實際實施時都存在某些缺點。專業(yè)光學設(shè)備的方法會限制所捕獲場景的視頻分辨率（video?resolution）。同步攝像機的方法需要許多個攝像機，從而不適用于正常使用條件。全景視頻紋理方法的圖割算法（graph?cut?algorithm）需要巨大的計算量，并且在復雜移動對象場景中會產(chǎn)生偽像（artifact）。前景和背景分割的方法需要極好的對象分割及追蹤，而即便使用立體攝像機（stereo?camera），極好的對象分割及追蹤在目前仍然是一個公開的難題。除了專業(yè)光學設(shè)備的方法，其他方法均需要縫合（stitch）多個視頻段。

另外，縫合是生成重影（ghosting）或偽像的主要原因。目前尚無用于分析及縫合大范圍不同場景而不產(chǎn)生重影的理想算法。此外，所有傳統(tǒng)全景觀看（viewing）系統(tǒng)要求裁剪和扭曲（cropping?and?warping）視頻幀以顯示正確的透視視圖（perspective?view）。為顯示每一視頻幀，扭曲算法需要高計算量，并且及其耗費時間，尤其在低成本手持（hand-held）設(shè)備中，上述現(xiàn)象尤甚。

因此，需要一種創(chuàng)新的設(shè)計，其能夠簡單并有效的創(chuàng)建和顯示全景視頻。

【發(fā)明內(nèi)容】

有鑒于此，本發(fā)明特提供一種視頻幀處理方法，視頻流播放方法及視頻幀記錄裝置。

本發(fā)明實施例提供了一種處理多個視頻幀的方法，包含獲取多個視頻幀的圖像配準信息，其中圖像配準信息用于將多個不同視頻幀轉(zhuǎn)換為同一坐標系統(tǒng)；以及使用圖像配準信息，在多個視頻幀中搜尋對應于選定場景的多個目標視頻幀。

本發(fā)明實施例又提供了一種視頻流播放方法，包含接收選定場景的播放請求；搜尋用于多個目標視頻幀的視頻流，其中多個目標視頻幀對應于選定場景的圖像配準信息，圖像配準信息用于將多個不同視頻幀轉(zhuǎn)換為同一坐標系統(tǒng)；以及依據(jù)在視頻流中找到的多個目標視頻幀執(zhí)行播放操作。

本發(fā)明實施例另提供了一種用于記錄多個視頻幀的裝置，包含視頻處理電路及信息采集電路。視頻處理電路依據(jù)多個視頻幀產(chǎn)生視頻流；信息采集電路獲取多個視頻幀的圖像配準信息，以及將圖像配準信息記錄入視頻流中，其中圖像配準信息用于將多個不同視頻幀轉(zhuǎn)換為同一坐標系統(tǒng)。

以上所述的視頻幀處理方法，視頻流播放方法及視頻幀記錄裝置能夠保證輸出視頻質(zhì)量，并且具有較低的計算復雜度。

【附圖說明】

圖1是依據(jù)本發(fā)明一個范例性實施例的記錄裝置的示意圖。

圖2是依據(jù)本發(fā)明另一范例性實施例的記錄裝置的示意圖。

圖3是圖1所示的記錄裝置的替代設(shè)計。

圖4是圖2所示的記錄裝置的替代設(shè)計。

圖5為將被記錄裝置處理的視頻幀的范例性排布的示意圖。

圖6為將被記錄裝置處理的視頻幀的另一范例性排布的示意圖。

圖7是依據(jù)范例性實施例的記錄多個視頻幀的方法流程圖。

圖8是依據(jù)本發(fā)明的范例性實施例的播放裝置的示意圖。

圖9是基于播放請求的范例性視頻幀選擇的示意圖。

圖10是基于播放請求的另一范例性視頻幀選擇的示意圖。

圖11是基于播放請求的又一范例性視頻幀選擇的示意圖。

圖12是范例性觀看幀尺寸歸一化操作的示意圖。