[發(fā)明專利]一種立體視頻的質(zhì)量評價方法、裝置和設(shè)備

有效

• 申請?zhí)枺?/td>: 201711297034.1
• 申請日: 2017-12-08
• 公開（公告）號: CN109905694B
• 公開（公告）日: 2020-09-08
• 發(fā)明（設(shè)計）人: 尤安通;方華;陳民;張聰
• 申請（專利權(quán)）人: 中移（杭州）信息技術(shù)有限公司;中國移動通信集團公司
• 主分類號: H04N17/00
• 分類號: H04N17/00
• 代理公司: 北京同達信恒知識產(chǎn)權(quán)代理有限公司 11291
• 代理人: 郭潤湘

1.一種立體視頻的質(zhì)量評價方法，其特征在于，包括：

針對輸入的原始立體視頻序列中的每一視頻幀，將該視頻幀劃分成若干個圖像塊，并分別確定各個圖像塊的運動特征和底層特征，所述視頻幀包含左視頻幀和右視頻幀，所述底層特征包括：亮度、對比度、方向和顏色；以及

針對任一圖像塊，確定該圖像塊的運動特征和底層特征分別能夠引起視覺注意的視覺關(guān)注度；

針對任一圖像塊，確定該圖像塊的底層特征能夠引起視覺注意的視覺關(guān)注度，具體包括：對該視頻幀進行多層級濾波和采樣處理；基于每一層級濾波和采樣處理得到的視頻幀，提取該圖像塊的底層特征；對不同層級間底層特征進行差值處理得到相應的特征圖；并對得到的各個特征圖執(zhí)行歸一化處理和特征融合，得到該圖像塊的底層特征能夠引起視覺注意的視覺關(guān)注度；

根據(jù)所述運動特征的視覺關(guān)注度和所述底層特征的視覺關(guān)注度，確定該圖像塊的視覺關(guān)注度權(quán)重值；

根據(jù)該視頻幀與失真處理后的視頻幀的相似度和該視頻幀包含的圖像塊的視覺關(guān)注度權(quán)重值，確定該視頻幀的客觀質(zhì)量得分；

基于所述原始立體視頻序列中各個左、右視頻幀的客觀質(zhì)量得分，確定所述原始立體視頻序列的客觀質(zhì)量得分。

2.如權(quán)利要求1所述的方法，其特征在于，根據(jù)該視頻幀與失真處理后的視頻幀的相似度和該視頻幀包含的圖像塊的視覺關(guān)注度權(quán)重值，確定該視頻幀的客觀質(zhì)量得分，具體包括：

針對輸入的原始立體視頻序列中的每一視頻幀，獲得該視頻幀對應的處理后的視頻幀；并

針對該視頻幀的每一圖像塊，確定所述處理后的視頻幀中與該圖像塊對應的圖像塊；

確定該圖像塊和所述處理后的視頻幀中與該圖像塊對應的圖像塊之間的相似度；

基于各個圖像塊得到的相似度和各個圖像塊的視覺關(guān)注度權(quán)重值，確定該視頻幀的客觀質(zhì)量得分。

3.如權(quán)利要求1所述的方法，其特征在于，所述運動特征用于指示圖像塊的運動快慢；以及針對任一圖像塊，按照下述公式確定該圖像塊的運動特征能夠引起視覺注意的視覺關(guān)注度：

其中，VA_scene(x,y)為第x行第y列對應的圖像塊的運動特征能夠引起視覺注意的視覺關(guān)注度；

MV(x,y)為第x行第y列對應的圖像塊的運動特征的模值大小；

d'為第x行第y列對應的圖像塊的校正深度值；

α,β,γ為擬合參數(shù)。

4.如權(quán)利要求3所述的方法，其特征在于，按照下述方法確定該圖像塊的校正深度值：

確定該視頻幀中各個圖像塊的深度值；

根據(jù)該視頻幀中各個圖像塊的運動特征的模值和各個圖像塊之間的方差，確定該視頻幀中、基于運動特征能夠引起視覺注意的圖像塊；

基于確定出的、基于運動特征能夠引起視覺注意的圖像塊的深度值，確定加權(quán)深度值；

根據(jù)確定出的加權(quán)深度值和該圖像塊的深度值，確定該圖像塊的校正深度值。

5.如權(quán)利要求4所述的方法，其特征在于，根據(jù)確定出的加權(quán)深度值和該圖像塊的深度值，按照下述公式確定該圖像塊的校正深度值：

其中，d'(x,y)為第x行第y列對應的圖像塊的校正深度值；

d_MV為確定出的加權(quán)深度值；

d_x,y為第x行第y列對應的圖像塊的深度值。

6.如權(quán)利要求1所述的方法，其特征在于，所述特征圖包括亮度特征圖、顏色特征圖和方向特征圖，以及對得到的各個特征圖執(zhí)行歸一化處理和特征融合，按照下述公式得到該圖像塊的底層特征能夠引起視覺注意的視覺關(guān)注度：

其中，VA_floor(x,y)為第x行第y列對應的圖像塊的底層特征能夠引起視覺注意的視覺關(guān)注度；

I(x,y)為第x行第y列對應的圖像塊的亮度特征圖執(zhí)行歸一化處理得到的亮度顯著度；

O(x,y)為第x行第y列對應的圖像塊的方向特征圖執(zhí)行歸一化處理得到的方向顯著度；

C(x,y)為第x行第y列對應的圖像塊的顏色特征圖執(zhí)行歸一化處理得到的顏色顯著度。