[發(fā)明專利]編解碼方法及裝置

有效

• 申請?zhí)枺?/td>: 202010115102.3
• 申請日: 2020-02-25
• 公開（公告）號(hào): CN111277829B
• 公開（公告）日: 2023-03-24
• 發(fā)明（設(shè)計(jì)）人: 張路;范志剛
• 申請（專利權(quán)）人: 西安萬像電子科技有限公司
• 主分類號(hào): H04N19/176
• 分類號(hào): H04N19/176;H04N19/146
• 代理公司: 北京挺立專利事務(wù)所(普通合伙) 11265
• 代理人: 韓暢

本公開提供一種編解碼方法、裝置及系統(tǒng)，涉及計(jì)算機(jī)編碼領(lǐng)域，具體技術(shù)方案為：獲取圖像幀中每個(gè)宏塊的宏塊內(nèi)容和繪圖指令，所述圖像幀被劃分為至少個(gè)宏塊；根據(jù)所述宏塊內(nèi)容識(shí)別所述每個(gè)宏塊的宏塊類型；根據(jù)所述繪圖指令和宏塊類型生成渲染指令；基于所述渲染指令，對所述每個(gè)宏塊按照與所述宏塊類型對應(yīng)的編碼方式進(jìn)行編碼處理，得到至少一個(gè)編碼宏塊信息；對所述至少一個(gè)編碼宏塊信息進(jìn)行碼流融合，得到目標(biāo)編碼圖像幀。本公開能夠在編碼過程中減少計(jì)算量并提高精確度。

技術(shù)領(lǐng)域

本公開涉及計(jì)算機(jī)編碼領(lǐng)域，尤其涉及編解碼方法及裝置。

背景技術(shù)

計(jì)算機(jī)圖像有自然圖像和計(jì)算機(jī)合成圖像兩大類。自然圖像指的是自然界真實(shí)存在的景色，人們生活中看到的電影、電視內(nèi)容均為自然圖像。計(jì)算機(jī)合成圖像是采用計(jì)算機(jī)圖形學(xué)技術(shù)，通過計(jì)算機(jī)上顯卡計(jì)算得到的人造圖像，例如辦公軟件Word的界面，游戲畫面，網(wǎng)頁文字，CAD軟件的矢量圖、渲染圖等等。

現(xiàn)有技術(shù)方案在編解碼方面主要有兩類，第一類是每幀圖像中的每個(gè)部分都被視為同等地位，均采用統(tǒng)一的方法對數(shù)據(jù)進(jìn)行編碼，壓縮方法多采用幀內(nèi)預(yù)測和幀間預(yù)測進(jìn)行壓縮，目前H.264，H.265等主流視頻編碼標(biāo)準(zhǔn)都屬于這種類型的編碼。這種編碼方式的特點(diǎn)是能夠?qū)Ω鞣N類型的圖像編碼，缺點(diǎn)是沒有考慮到“屏幕視頻圖像”的特殊性，即沒有利用計(jì)算機(jī)合成圖像的特性做出針對性的優(yōu)化，碼率較大，編碼效果不是最優(yōu)。另一類是在編碼前首先將“屏幕視頻圖像”進(jìn)行元素識(shí)別并分類，將不同類型的元素使用不同的編碼器進(jìn)行編碼，這種方式專用性和針對性較強(qiáng)，主要用途就是計(jì)算機(jī)合成圖像，編碼效果較好。但一個(gè)主要問題在于編碼壓縮過程中資源消耗較高，計(jì)算量大。其中一個(gè)計(jì)算力的主要消耗點(diǎn)就是宏塊分類環(huán)節(jié)。對于人眼來說，可以輕松分辨圖像中哪個(gè)區(qū)域是文本，哪個(gè)區(qū)域是圖片，以及高梯度圖片和較為平緩的圖片，但對于計(jì)算機(jī)來說，這是相當(dāng)復(fù)雜的問題。現(xiàn)有技術(shù)為了識(shí)別圖像中的不同元素，需要做像大量運(yùn)算，準(zhǔn)確率也不高。

發(fā)明內(nèi)容

本公開實(shí)施例提供一種編解碼方法及裝置，本公開能夠解決在編碼過程中計(jì)算量大和精確度低的問題。所述技術(shù)方案如下：

根據(jù)本公開實(shí)施例的第一方面，提供一種編碼方法，應(yīng)用于編碼裝置，該方法包括：

獲取圖像幀中每個(gè)宏塊的宏塊內(nèi)容和繪圖指令，所述圖像幀被劃分為至少個(gè)宏塊；

根據(jù)所述宏塊內(nèi)容識(shí)別所述每個(gè)宏塊的宏塊類型；

根據(jù)所述繪圖指令和宏塊類型生成渲染指令；

基于所述渲染指令，對所述每個(gè)宏塊按照與所述宏塊類型對應(yīng)的編碼方式進(jìn)行編碼處理，得到至少一個(gè)編碼宏塊信息；

對所述至少一個(gè)編碼宏塊信息進(jìn)行碼流融合，得到目標(biāo)編碼圖像幀。

本方案將文字、圖片宏塊和視頻區(qū)域的識(shí)別放在底層進(jìn)行，應(yīng)用程序下發(fā)的繪圖指令所生成的渲染指令，判斷應(yīng)用程序下發(fā)的繪圖意圖，通過分析渲染指令，得出各類型宏塊的區(qū)域，并進(jìn)一步劃分文字宏塊，圖像宏塊和視頻窗口?？梢钥闯觯竟_所有宏塊的識(shí)別分類都不再需要進(jìn)行像素比較，節(jié)省了大量的計(jì)算量。

在一個(gè)實(shí)施例中，根據(jù)所述宏塊內(nèi)容識(shí)別所述每個(gè)宏塊的宏塊類型包括：

當(dāng)宏塊內(nèi)容包括文字時(shí)，識(shí)別所述宏塊的宏塊類型為文字宏塊；

當(dāng)宏塊內(nèi)容包括視頻時(shí)，識(shí)別所述宏塊的宏塊類型為視頻宏塊；

當(dāng)宏塊內(nèi)容包括圖像時(shí)，識(shí)別所述宏塊的宏塊類型為圖像宏塊。

在一個(gè)實(shí)施例中，當(dāng)宏塊類型為文字宏塊，所述渲染指令中包括文本指令，所述文本指令包括文字顯示信息；

當(dāng)宏塊類型為視頻宏塊，所述選擇指令中包括視頻指令，所述視頻指令包括視頻播放窗口顯示信息。