[發(fā)明專利]視頻圖像局部區(qū)域放大的方法和裝置

有效

• 申請?zhí)枺?/td>: 201410495424.X
• 申請日: 2014-09-24
• 公開（公告）號: CN104268827B
• 公開（公告）日: 2019-06-04
• 發(fā)明（設(shè)計(jì)）人: 侯天峰;張義輪;朱春波
• 申請（專利權(quán)）人: 三星電子（中國）研發(fā)中心;三星電子株式會社
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T5/00
• 代理公司: 北京英賽嘉華知識產(chǎn)權(quán)代理有限責(zé)任公司 11204
• 代理人: 王達(dá)佐;馬曉亞

本申請公開了一種視頻圖像局部區(qū)域放大的方法和裝置。該方法的一具體實(shí)施方式包括：確定視頻中目標(biāo)片段內(nèi)每幀圖像的感興趣區(qū)域，視頻包括一個(gè)或多個(gè)片段；根據(jù)位于感興趣區(qū)域中的第一圖像的自相似性，對第一圖像進(jìn)行第一超分辨率重構(gòu)，得到第二圖像；通過迭代反投影IBP算法，對第二圖像進(jìn)行第二超分辨率重構(gòu)，得到第三圖像；顯示第三圖像。該實(shí)施方式實(shí)現(xiàn)了視頻圖像局部區(qū)域放大，增加了放大后的局部區(qū)域圖像的清晰度。

技術(shù)領(lǐng)域

本申請涉及圖像處理領(lǐng)域，具體涉及視頻圖像處理領(lǐng)域，尤其涉及視頻圖像局部區(qū)域放大的方法和裝置。

背景技術(shù)

現(xiàn)有技術(shù)中，用戶在觀看視頻時(shí)，可能僅會關(guān)注局部區(qū)域中的圖像。但是，由于局部區(qū)域中的圖像較小，使得用戶無法清晰的觀看到局部圖像。即使視頻圖像局部區(qū)域可以放大，其清晰度也會比較低。

發(fā)明內(nèi)容

本申請?zhí)峁┝艘环N視頻圖像局部區(qū)域放大的方法和裝置，解決了視頻圖像局部區(qū)域放大，導(dǎo)致放大后的局部區(qū)域清晰度較低的問題。

第一方面，提供了一種視頻圖像局部區(qū)域放大的方法，所述方法包括：

確定視頻中目標(biāo)片段內(nèi)每幀圖像的感興趣區(qū)域，所述視頻包括一個(gè)或多個(gè)片段；

根據(jù)位于所述感興趣區(qū)域中的第一圖像的自相似性，對所述第一圖像進(jìn)行第一超分辨率重構(gòu)，得到第二圖像；

通過迭代反投影IBP(Iterative Back Projection)算法，對所述第二圖像進(jìn)行第二超分辨率重構(gòu)，得到第三圖像；

顯示所述第三圖像。

在某些實(shí)施方式中，所述確定視頻中目標(biāo)片段內(nèi)每幀圖像的感興趣區(qū)域，包括：

確定所述目標(biāo)片段的第一幀圖像的感興趣區(qū)域；

根據(jù)所述第一幀圖像的感興趣區(qū)域，預(yù)測所述目標(biāo)片段中其他幀圖像的感興趣區(qū)域。

在某些實(shí)施方式中，所述確定所述目標(biāo)片段的第一幀圖像的感興趣區(qū)域，包括：

獲取所述第一幀圖像的顯著度信息和角點(diǎn)分布信息；

根據(jù)所述顯著度信息和所述角點(diǎn)分布信息，確定所述第一幀圖像的感興趣區(qū)域。

在某些實(shí)施方式中，所述其他幀圖像的感興趣區(qū)域，是根據(jù)其上一幀的感興趣圖像區(qū)域和感興趣區(qū)域運(yùn)動(dòng)跟蹤算法預(yù)測的。

在某些實(shí)施方式中，所述運(yùn)動(dòng)跟蹤包括如下任一項(xiàng)：基于主動(dòng)輪廓的跟蹤、基于特征的跟蹤、基于區(qū)域的跟蹤、基于模型的跟蹤。

在某些實(shí)施方式中，還包括：

根據(jù)針對所述感興趣區(qū)域的設(shè)置操作，調(diào)整所述感興趣區(qū)域的位置和范圍。

在某些實(shí)施方式中，所述根據(jù)位于所述感興趣區(qū)域中的第一圖像的自相似性，對所述第一圖像進(jìn)行第一超分辨率重構(gòu)，得到第二圖像，包括：

獲取所述第一圖像的N級放大圖像和N-1級放大高頻信息圖像，所述N級放大圖像是通過放大N級放大輸入圖像得到的，所述N-1級放大高頻信息圖像是根據(jù)所述N級放大輸入圖像得到的，所述N級放大輸入圖像是根據(jù)N-1級放大圖像與N-2級放大高頻信息圖像之間的相似性，將所述N-2級放大高頻信息圖像疊加到所述N-1級放大圖像上得到的，其中，N大于或等于2；

根據(jù)所述N級放大圖像與所述N級放大輸入圖像之間的相似性，獲取所述N級放大圖像與所述N-1級放大高頻信息圖像之間的位置對應(yīng)關(guān)系；

根據(jù)所述位置對應(yīng)關(guān)系，將所述N-1級放大高頻信息圖像疊加到所述N級放大圖像上，得到所述第二圖像。

在某些實(shí)施方式中，所述N-1級放大高頻信息圖像是通過對所述N級放大輸入圖像進(jìn)行高斯濾波獲取的。