[發(fā)明專利]基于幀內(nèi)塊復(fù)制的自適應(yīng)圖像預(yù)處理方法、裝置及介質(zhì)

在審

• 申請(qǐng)?zhí)枺?/td>: 202210281635.8
• 申請(qǐng)日: 2022-03-22
• 公開（公告）號(hào): CN114692742A
• 公開（公告）日: 2022-07-01
• 發(fā)明（設(shè)計(jì)）人: 王軍;楊鵬健;張萊
• 申請(qǐng)（專利權(quán)）人: 中山大學(xué)
• 主分類號(hào): G06K9/62
• 分類號(hào): G06K9/62;G06N3/04;G06N3/08;G06V10/26;G06V10/764;G06V10/82
• 代理公司: 廣州嘉權(quán)專利商標(biāo)事務(wù)所有限公司 44205
• 代理人: 梁嘉琦

本發(fā)明公開了一種基于幀內(nèi)塊復(fù)制的自適應(yīng)圖像預(yù)處理方法、裝置及介質(zhì)，本發(fā)明通過獲取已編碼區(qū)域的重建圖像，將重建圖像輸入分類器進(jìn)行判斷處理，得到判斷處理結(jié)果，當(dāng)判斷處理結(jié)果表征需要進(jìn)行預(yù)處理，對(duì)重建圖像進(jìn)行圖像增強(qiáng)處理得到增強(qiáng)圖像，有利于改善重建圖像的壓縮偽影；獲取重建圖像對(duì)應(yīng)的第一真實(shí)概率以及獲取增強(qiáng)圖像的第二真實(shí)概率，根據(jù)第一真實(shí)概率以及第二真實(shí)概率確定最終圖像以替換重建圖像，或者獲取重建圖像的第一像素均值以及增強(qiáng)圖像的第二像素均值，根據(jù)第一像素均值以及第二像素均值確定最終圖像以替換重建圖像，有利于使更好圖像質(zhì)量的最終圖像作為參考?jí)K，可以有效提升預(yù)測(cè)精度和編碼效率，可廣泛應(yīng)用于視頻編碼領(lǐng)域。

技術(shù)領(lǐng)域

本發(fā)明涉及視頻編碼領(lǐng)域，尤其是一種基于幀內(nèi)塊復(fù)制的自適應(yīng)圖像預(yù)處理方法、裝置及介質(zhì)。

背景技術(shù)

近年來，隨著計(jì)算機(jī)技術(shù)的不斷發(fā)展，屏幕內(nèi)容視頻在視頻編碼領(lǐng)域受到了越來越廣泛的關(guān)注。幀內(nèi)塊復(fù)制(IBC)是屏幕內(nèi)容編碼中性能最好，效率最高的工具，幀內(nèi)塊復(fù)制方法用于幀內(nèi)編碼，屬于幀內(nèi)預(yù)測(cè)的環(huán)節(jié)，幀內(nèi)塊復(fù)制方法在編碼當(dāng)前塊時(shí)搜索參考區(qū)域，如果參考區(qū)域中有與當(dāng)前編碼塊像素值相同(或相似)的塊，就會(huì)使用幀內(nèi)塊復(fù)制方法，將參考?jí)K作為當(dāng)前塊的預(yù)測(cè)，因此，參考?jí)K的圖像質(zhì)量直接決定了當(dāng)前編碼塊的質(zhì)量。傳統(tǒng)的幀內(nèi)塊復(fù)制方法中重建圖像未經(jīng)過任何濾波處理，存在嚴(yán)重的塊效應(yīng)，振鈴效應(yīng)等壓縮偽影，極大的影響了參考區(qū)域圖像塊的質(zhì)量，導(dǎo)致幀內(nèi)塊復(fù)制在搜索匹配塊時(shí)參考?jí)K與當(dāng)前編碼塊之間的匹配不夠準(zhǔn)確，增大了塊向量補(bǔ)償?shù)膫鬟f數(shù)據(jù)量，影響了幀內(nèi)塊復(fù)制方法的效果，還可能出現(xiàn)IBC工具無法匹配，只能使用編碼效率很低的傳統(tǒng)幀內(nèi)預(yù)測(cè)工具，從而導(dǎo)致編碼所需的碼率大大增加的問題，因此需要尋求解決方案。

發(fā)明內(nèi)容

有鑒于此，為了解決上述技術(shù)問題的至少之一，本發(fā)明的目的是提供提高編碼效率的一種基于幀內(nèi)塊復(fù)制的自適應(yīng)圖像預(yù)處理方法、裝置及介質(zhì)。

本發(fā)明實(shí)施例采用的技術(shù)方案是：

基于幀內(nèi)塊復(fù)制的自適應(yīng)圖像預(yù)處理方法，包括：

獲取已編碼區(qū)域的重建圖像；

將所述重建圖像輸入分類器進(jìn)行判斷處理，得到判斷處理結(jié)果；

當(dāng)所述判斷處理結(jié)果表征需要進(jìn)行預(yù)處理，對(duì)所述重建圖像進(jìn)行圖像增強(qiáng)處理，得到增強(qiáng)圖像；

獲取所述重建圖像對(duì)應(yīng)的第一真實(shí)概率以及獲取所述增強(qiáng)圖像的第二真實(shí)概率，根據(jù)所述第一真實(shí)概率以及所述第二真實(shí)概率確定最終圖像以替換所述重建圖像，或者，獲取所述重建圖像的第一像素均值以及所述增強(qiáng)圖像的第二像素均值，根據(jù)所述第一像素均值以及所述第二像素均值確定最終圖像以替換所述重建圖像。

進(jìn)一步，所述將所述重建圖像輸入分類器進(jìn)行判斷處理，得到判斷處理結(jié)果，包括：

將所述重建圖像輸入所述分類器以對(duì)所述重建圖像進(jìn)行分割，得到若干個(gè)重建子塊，分別計(jì)算每一所述重建子塊的像素值方差，并確定所述像素值方差為0的重建子塊的數(shù)量，當(dāng)所述數(shù)量小于預(yù)設(shè)數(shù)量閾值，得到表征需要進(jìn)行預(yù)處理的判斷處理結(jié)果，否則得到不需要進(jìn)行預(yù)處理的判斷處理結(jié)果；

或者，

將所述重建圖像輸入所述分類器以識(shí)別所述重建圖像是否包含待處理區(qū)域，若包含所述待處理區(qū)域得到表征需要進(jìn)行預(yù)處理的判斷處理結(jié)果，否則得到不需要進(jìn)行預(yù)處理的判斷處理結(jié)果。

進(jìn)一步，所述對(duì)所述重建圖像進(jìn)行圖像增強(qiáng)處理，得到增強(qiáng)圖像，包括：

對(duì)所述重建圖像進(jìn)行第一卷積并對(duì)第一卷積結(jié)果進(jìn)行下采樣處理；

通過殘差網(wǎng)絡(luò)對(duì)下采樣處理結(jié)果進(jìn)行處理并進(jìn)行上采樣處理；

對(duì)上采樣處理結(jié)果進(jìn)行第二卷積，得到增強(qiáng)圖像。

進(jìn)一步，所述獲取所述重建圖像對(duì)應(yīng)的第一真實(shí)概率以及獲取所述增強(qiáng)圖像的第二真實(shí)概率，包括：