[發(fā)明專利]用于流幀的時(shí)間穩(wěn)定的方法和設(shè)備

有效

• 申請?zhí)枺?/td>: 201310576719.5
• 申請日: 2013-11-18
• 公開（公告）號: CN103826067B
• 公開（公告）日: 2017-07-21
• 發(fā)明（設(shè)計(jì)）人: P·尼諾南
• 申請（專利權(quán)）人: 諾基亞技術(shù)有限公司
• 主分類號: H04N5/243
• 分類號: H04N5/243
• 代理公司: 北京市金杜律師事務(wù)所11256
• 代理人: 酆迅

技術(shù)領(lǐng)域

根據(jù)示例實(shí)施例提供了用于處理流幀（streaming frame）并且更具體地用于提供流幀的時(shí)間穩(wěn)定（temporal stabilization）方法和設(shè)備。

背景技術(shù)

為了例如通過捕獲流視頻幀來適當(dāng)?shù)赜涗浕蛘吡硗馓幚砹鲙瑢?shí)現(xiàn)了多個(gè)控制算法。例如，針對流幀的控制算法包括自動(dòng)曝光控制（AEC）算法、自動(dòng)白平衡（AWB）算法、如美國專利No.7,835,588所描述的對比優(yōu)化算法等等。作為示例，AEC算法接收關(guān)于曝光的信息以及與當(dāng)前幀相關(guān)的其它圖像統(tǒng)計(jì)數(shù)據(jù)，確定當(dāng)前幀所表示的圖像是曝光不足、曝光過度還是適度曝光，并且在其中當(dāng)前幀所表示的圖像被確定為曝光不足或者曝光過度的情況下，針對下一幀建議不同的曝光。就此而言，圖1描繪了多個(gè)幀的照度級（illumination level）以及進(jìn)而針對下一個(gè)幀由AEC算法建議的曝光。因?yàn)锳EC算法所執(zhí)行的分析在已經(jīng)被曝光的幀上被執(zhí)行，所以針對下一個(gè)幀，光照度可能有所改變。由于常常希望幀流體驗(yàn)沒有延遲，所以可能存在如圖1中的“u”表示的偶爾的曝光不足或者如圖1中的“o”表示的偶爾的曝光過度。此外，例如可能是由對當(dāng)前幀的照度級的分析造成的曝光水平的頻繁變化可能響應(yīng)于圖像亮度的至少一些相對微小的變化產(chǎn)生隨時(shí)間推移的曝光水平的重復(fù)變化，使得所得到的視覺效果對于觀看者而言可能有些不安。

已經(jīng)開發(fā)了一種技術(shù)，該技術(shù)保存已針對多個(gè)先前的幀確定的未經(jīng)濾波的控制值（即一個(gè)或多個(gè)控制算法的產(chǎn)物），然后確定并利用控制值的加權(quán)平均值。然而，這種技術(shù)的收斂速度不能簡單且準(zhǔn)確地調(diào)諧。此外，這種技術(shù)所提供的濾波的強(qiáng)度可能只在其中所保存的樣本的數(shù)目相對較高的情況下被提高，這也可能是不利的。

發(fā)明內(nèi)容

提供了根據(jù)本發(fā)明的示例實(shí)施例的方法、設(shè)備和計(jì)算機(jī)程序產(chǎn)品以提供對與流幀的處理相關(guān)聯(lián)的一個(gè)或多個(gè)控制算法的改進(jìn)的時(shí)間穩(wěn)定。就此而言，示例實(shí)施例的方法、設(shè)備和計(jì)算機(jī)程序產(chǎn)品以一種平滑而較好快速的方式對曝光的變化做出響應(yīng)，并且在一個(gè)實(shí)施例中可以允許收斂速度是可調(diào)諧的。此外，示例實(shí)施例的方法、設(shè)備和計(jì)算機(jī)程序產(chǎn)品可以被配置以使得不對輸入數(shù)據(jù)偶爾的短暫異常（例如閃光燈）做出響應(yīng)。因此，示例實(shí)施例的方法、設(shè)備和計(jì)算機(jī)程序產(chǎn)品可以在流幀只有微小變化的情況下提供對流視頻的相對穩(wěn)定的控制。在一個(gè)實(shí)施例中，所述方法、設(shè)備和計(jì)算機(jī)程序產(chǎn)品還可以順暢地對流幀的是遞減的或是遞增的趨勢進(jìn)行跟隨。通過提供針對流幀的時(shí)間穩(wěn)定，用戶體驗(yàn)可以通過提供所希望的控制但又以一種令人滿意且在一些情況下可由用戶調(diào)諧的方式而得以改善。

在一個(gè)實(shí)施例中，提供了一種方法，該方法包括利用處理器確定其間經(jīng)濾波的值已經(jīng)大于當(dāng)前幀的當(dāng)前值的緊接著在前的連續(xù)幀的數(shù)目或者其間經(jīng)濾波的值已經(jīng)小于當(dāng)前幀的當(dāng)前值的緊接著在前的連續(xù)幀的數(shù)目。該實(shí)施例的方法還可以包括基于緊接著在前的連續(xù)幀的數(shù)目確定權(quán)重。該權(quán)重被配置為按照與緊接著在前的連續(xù)幀的數(shù)目的直接關(guān)系而變化。該實(shí)施例的方法還基于該權(quán)重和先前經(jīng)濾波的值和當(dāng)前幀的當(dāng)前值之間的差別的組合確定當(dāng)前幀的經(jīng)濾波的值。

在一個(gè)實(shí)施例中，該方法通過如下方式確定緊接著在前的連續(xù)幀的數(shù)目：維持其間經(jīng)濾波的值已經(jīng)大于當(dāng)前幀的當(dāng)前值的緊接著在前的連續(xù)幀的數(shù)目的第一計(jì)數(shù)器或者維持其間經(jīng)濾波的值已經(jīng)小于當(dāng)前幀的當(dāng)前值的緊接著在前的連續(xù)幀的數(shù)目的第二計(jì)數(shù)器。該實(shí)施例的方法還可以包括在其中經(jīng)濾波的值至少超過當(dāng)前幀的當(dāng)前值的情況下重置第一計(jì)數(shù)器和第二計(jì)數(shù)器中的至少一個(gè)。另一實(shí)施例的方法還可以包括在其中經(jīng)濾波的值至少超過當(dāng)前幀的當(dāng)前值的情況下減小第一計(jì)數(shù)器和第二計(jì)數(shù)器中的至少一個(gè)。在該實(shí)施例中，該方法還可以包括確定緊接著在前的連續(xù)幀是遞增的或者確定緊接著在前的連續(xù)幀是遞減的。在該實(shí)施例中，該方法可以通過在其中緊接著在前的連續(xù)幀被確定是遞增的或是遞減的的情況下減小但是不重置第一計(jì)數(shù)器和第二計(jì)數(shù)器中的至少一個(gè)來減小第一計(jì)數(shù)器和第二計(jì)數(shù)器中的至少一個(gè)。