[發(fā)明專利]字幕圖像的處理方法和裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201410798220.3
• 申請(qǐng)日: 2014-12-19
• 公開（公告）號(hào): CN104410929A
• 公開（公告）日: 2015-03-11
• 發(fā)明（設(shè)計(jì)）人: 張義輪;侯天峰;朱春波
• 申請(qǐng)（專利權(quán)）人: 三星電子（中國(guó)）研發(fā)中心;三星電子株式會(huì)社
• 主分類號(hào): H04N21/81
• 分類號(hào): H04N21/81;H04N21/431;H04N21/472
• 代理公司: 北京英賽嘉華知識(shí)產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

技術(shù)領(lǐng)域

本申請(qǐng)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，具體涉及計(jì)算機(jī)圖像處理領(lǐng)域，尤其涉及字幕圖像的處理方法和裝置。

背景技術(shù)

隨著高清和超高清電視的普及，當(dāng)在高清或超高清電視上播放視頻時(shí)，一些以圖片形式顯示的視頻字幕的分辨率比較低，為了給觀眾更好的視覺效果，就需要對(duì)字幕進(jìn)行相應(yīng)的放大。

現(xiàn)有技術(shù)主要有兩類放大方法：一類方法是利用預(yù)存放大后的字體庫對(duì)字幕進(jìn)行放大，當(dāng)接收到字幕信息后對(duì)字幕中的字進(jìn)行識(shí)別并從字體庫里找到相應(yīng)的字體進(jìn)行顯示；另一類方法是把字幕當(dāng)成圖像進(jìn)行放大，現(xiàn)有技術(shù)大多是采用雙線性或雙立方插值對(duì)字幕進(jìn)行放大。

發(fā)明內(nèi)容

上述技術(shù)中，利用預(yù)存放大后的字體庫對(duì)字幕進(jìn)行放大的技術(shù)，由于字體樣式多樣化，既包含中文又有外文，將所有不同種類語言以及語言的不同字體樣式都進(jìn)行預(yù)存儲(chǔ)是不現(xiàn)實(shí)的，同時(shí)與字體庫中的字體進(jìn)行匹配時(shí)的準(zhǔn)確度也是待考慮的一個(gè)問題。采用雙線性或雙立方插值對(duì)字幕進(jìn)行放大的技術(shù)，是對(duì)字幕進(jìn)行簡(jiǎn)單的插值，由于字幕本來分辨率較低，邊界比較粗糙，如果進(jìn)行簡(jiǎn)單的插值，視覺效果較差，存在鋸齒和模糊現(xiàn)象，特別是在放大倍率較大，例如放大倍率>＝3時(shí)，鋸齒和模糊現(xiàn)象更為嚴(yán)重。

本申請(qǐng)?zhí)峁┝俗帜粓D像的處理方法和裝置。

一方面，本申請(qǐng)?zhí)峁┝艘环N字幕圖像的處理方法，所述方法包括：獲取第一字幕圖像的放大倍數(shù)；根據(jù)所述放大倍數(shù)，對(duì)所述第一字幕圖像的YUV分量進(jìn)行邊緣方向的插值上采樣，得到第一YUV分量；根據(jù)所述放大倍數(shù)，對(duì)所述第一字幕圖像的透明度分量進(jìn)行插值上采樣，得到第一透明度分量；合成所述第一YUV分量與所述第一透明度分量，得到第二字幕圖像；基于所述第二字幕圖像，得到用于顯示的圖像。

在某些實(shí)施方式中，所述根據(jù)所述放大倍數(shù)，對(duì)所述第一字幕圖像的YUV分量進(jìn)行邊緣方向的插值上采樣，得到第一YUV分量包括：對(duì)所述第一字幕圖像的YUV分量進(jìn)行邊緣方向的插值上采樣、修正和下采樣，得到預(yù)處理后的YUV分量；對(duì)所述預(yù)處理后的YUV分量進(jìn)行邊緣方向的插值上采樣，得到所述第一YUV分量。

在某些實(shí)施方式中，所述進(jìn)行邊緣方向的插值上采樣包括：將待插值圖像的每個(gè)像素點(diǎn)作為一次插值基準(zhǔn)像素點(diǎn)，獲取位于一次插值像素點(diǎn)0°、45°、90°和135°方向的梯度差，將最大梯度差的垂直方向作為插值方向進(jìn)行插值，得到所述一次插值像素點(diǎn)；將所述待插值圖像的像素點(diǎn)和所述一次插值像素點(diǎn)作為二次插值基準(zhǔn)像素點(diǎn)，獲取位于二次插值像素點(diǎn)0°、45°、90°和135°方向的梯度差，將最大梯度差的垂直方向作為插值方向進(jìn)行插值，得到所述二次插值像素點(diǎn)。

在某些實(shí)施方式中，所述獲取位于一次插值像素點(diǎn)0°、45°、90°和135°方向的梯度差，將最大梯度差的垂直方向作為插值方向進(jìn)行插值，得到所述一次插值像素點(diǎn)包括：若所述插值方向在所述一次插值像素點(diǎn)的45°或135°方向，對(duì)位于所述插值方向上且分別與所述一次插值像素點(diǎn)相鄰的兩個(gè)一次插值基準(zhǔn)像素點(diǎn)進(jìn)行插值，得到所述一次插值像素點(diǎn)；若所述插值方向在所述一次插值像素點(diǎn)的0°或90°方向，對(duì)與所述一次插值像素點(diǎn)相鄰的四個(gè)一次插值基準(zhǔn)像素點(diǎn)進(jìn)行插值，得到所述一次插值像素點(diǎn)。

在某些實(shí)施方式中，所述獲取位于二次插值像素點(diǎn)0°、45°、90°和135°方向的梯度差，將最大梯度差的垂直方向作為插值方向進(jìn)行插值，得到二次插值像素點(diǎn)包括：若所述插值方向在所述二次插值像素點(diǎn)的45°或135°方向，對(duì)與所述二次插值像素點(diǎn)相鄰的四個(gè)二次插值基準(zhǔn)像素點(diǎn)進(jìn)行插值，得到所述二次插值像素點(diǎn)；若所述插值方向在所述二次插值像素點(diǎn)的0°或90°方向，對(duì)位于所述插值方向上且分別與所述二次插值像素點(diǎn)相鄰的兩個(gè)二次插值基準(zhǔn)像素點(diǎn)進(jìn)行插值，得到所述二次插值像素點(diǎn)。

在某些實(shí)施方式中，在所述對(duì)所述第一字幕圖像的YUV分量進(jìn)行邊緣方向的插值上采樣之后進(jìn)行修正包括：在進(jìn)行插值上采樣之后的第一字幕圖像中，獲取原第一字幕圖像的像素點(diǎn)在水平方向的梯度G1和在垂直方向的梯度G2；建立梯度-權(quán)值映射模型；基于所述G1、G2和所述梯度-權(quán)值映射模型，得到原第一字幕圖像的像素點(diǎn)水平方向的權(quán)值W1和垂直方向的權(quán)值W2；基于所述W1、W2和以所述第一字幕圖像為待插值圖像的二次插值像素點(diǎn)，加權(quán)修正所述原第一字幕圖像的像素點(diǎn)。

在某些實(shí)施方式中，所述基于所述第二字幕圖像，得到用于顯示的圖像包括：對(duì)所述第二字幕圖像進(jìn)行反向投影(IBP)修正，得到第三字幕圖像，基于所述第三字幕圖像，得到所述用于顯示的圖像。