[發(fā)明專利]視頻處理方法和裝置

在審

• 申請?zhí)枺?/td>: 202010841624.1
• 申請日: 2020-08-20
• 公開（公告）號: CN114079777A
• 公開（公告）日: 2022-02-22
• 發(fā)明（設(shè)計）人: 馬利;折小強(qiáng);滕藝丹;刁文波;汪學(xué)斌;尹東明;蘇敏;韓文勇
• 申請（專利權(quán)）人: 華為技術(shù)有限公司
• 主分類號: H04N19/154
• 分類號: H04N19/154;H04N17/00
• 代理公司: 北京同立鈞成知識產(chǎn)權(quán)代理有限公司 11205
• 代理人: 余娜;劉芳

本申請實(shí)施例提供一種視頻處理方法和裝置，涉及數(shù)據(jù)處理領(lǐng)域。方法包括：移動邊緣計算設(shè)備接收來自多個第一終端設(shè)備的多個第一視頻流；移動邊緣計算設(shè)備根據(jù)多個第一視頻流獲取第二視頻流、背景圖像和描述參數(shù)；第二視頻流為根據(jù)多個第一視頻流合成的視頻流；移動邊緣計算設(shè)備根據(jù)多個第一視頻流、第二視頻流、背景圖像和描述參數(shù)確定多個目標(biāo)指標(biāo)的值；多個目標(biāo)指標(biāo)與人因工程指標(biāo)和客觀視頻質(zhì)量指標(biāo)相關(guān)；移動邊緣計算設(shè)備對多個目標(biāo)指標(biāo)的值加權(quán)計算得到反映第二視頻流的質(zhì)量的處理結(jié)果。本申請實(shí)施例融合了主觀和客觀的評價方法，不需要人的實(shí)時參與，易于實(shí)現(xiàn)且能得到較為準(zhǔn)確的反映視頻質(zhì)量的處理結(jié)果。

技術(shù)領(lǐng)域

本申請涉及圖像處理技術(shù)領(lǐng)域，尤其涉及一種視頻處理方法和裝置。

背景技術(shù)

隨著圖像處理技術(shù)的發(fā)展，視頻直播得到較多發(fā)展。例如，可以在比賽現(xiàn)場安裝用于采集視頻流的攝像設(shè)備，視頻合成設(shè)備將各攝像設(shè)備采集的視頻流合成為全景視頻，進(jìn)而通過網(wǎng)絡(luò)媒體等發(fā)布該全景視頻，以向用戶直播比賽過程。

可能的設(shè)計中，為了得到質(zhì)量較好的合成視頻，可以檢測合成后的視頻的質(zhì)量，從而可以參考合成后的視頻的質(zhì)量進(jìn)行合成優(yōu)化等。例如，可以獲得合成后的視頻，分析統(tǒng)計該合成后的視頻的相關(guān)信息，用該相關(guān)信息反應(yīng)視頻質(zhì)量。示例性的，相關(guān)信息可以包括均方誤差(mean squared error，MSE)，信噪比(signal-noise ratio，SNR)，峰值信噪比(peaksignal-noise ratio，PSNR)，均方根誤差(root mean squared error，RMSE)等。

但是，該方式中反映的視頻質(zhì)量經(jīng)常不準(zhǔn)確，不能為優(yōu)化視頻處理提供有效參考。

發(fā)明內(nèi)容

本申請實(shí)施例提供一種視頻處理方法和裝置，移動邊緣計算(mobile edgecomputing，MEC)設(shè)備可以結(jié)合主觀和客觀參數(shù)來得到反映視頻質(zhì)量的信息，能得到較為準(zhǔn)確的反映視頻質(zhì)量的信息。

第一方面，本申請實(shí)施例提供一種視頻處理方法，包括：移動邊緣計算設(shè)備接收來自多個第一終端設(shè)備的多個第一視頻流；移動邊緣計算設(shè)備根據(jù)多個第一視頻流獲取第二視頻流、背景圖像和描述參數(shù)；其中，第二視頻流為根據(jù)多個第一視頻流合成的視頻流，背景圖像為對第二視頻流進(jìn)行前后景處理得到的，描述參數(shù)用于描述第二視頻流對應(yīng)的場景信息；移動邊緣計算設(shè)備根據(jù)多個第一視頻流、第二視頻流、背景圖像和描述參數(shù)確定多個目標(biāo)指標(biāo)的值；多個目標(biāo)指標(biāo)與人因工程指標(biāo)和客觀視頻質(zhì)量指標(biāo)相關(guān)；移動邊緣計算設(shè)備對多個目標(biāo)指標(biāo)的值加權(quán)計算得到第二視頻流的處理結(jié)果；處理結(jié)果用于反映第二視頻流的質(zhì)量。因?yàn)楸旧暾垖?shí)施例中，目標(biāo)指標(biāo)與人因工程指標(biāo)和客觀視頻質(zhì)量指標(biāo)均相關(guān)，能夠同時結(jié)合主觀參數(shù)和客觀參數(shù)來得到反映視頻質(zhì)量的處理結(jié)果，則該處理結(jié)果相較于客觀視頻質(zhì)量評價方法，能夠更為準(zhǔn)確，且相較于主觀視頻質(zhì)量評價方法，不需要人的實(shí)時參與，是能夠自動實(shí)現(xiàn)的方法，因此本申請實(shí)施例的視頻處理方法具有易于實(shí)現(xiàn)且能得到較為準(zhǔn)確的反映視頻質(zhì)量的處理結(jié)果。

在一種可能的實(shí)現(xiàn)方式中，移動邊緣計算設(shè)備根據(jù)多個第一視頻流、第二視頻流、背景圖像和描述參數(shù)確定多個目標(biāo)指標(biāo)的值，包括：移動邊緣計算設(shè)備從多個第一視頻流、第二視頻流、背景圖像和描述參數(shù)中采集多個第一參數(shù)的值；其中，第一參數(shù)包括從第二視頻流采集得到的通用客觀的視頻參數(shù)、從第二視頻流和多個第一視頻流和背景圖像中采集得到的反映視頻處理質(zhì)量的參數(shù)、反映視頻處理算法質(zhì)量的參數(shù)、交互參數(shù)以及用戶端參數(shù)；移動邊緣計算設(shè)備根據(jù)多個第一參數(shù)的值確定用于第二視頻流評分的多個目標(biāo)指標(biāo)的值。這樣可以得到既包含視頻客觀質(zhì)量的參數(shù)，也包含體現(xiàn)人為因素的參數(shù)，有利于后續(xù)得到準(zhǔn)確的處理結(jié)果。