[發明專利]視頻圖像局部區域放大的方法和裝置

有效

• 申請號: 201410495424.X
• 申請日: 2014-09-24
• 公開（公告）號: CN104268827B
• 公開（公告）日: 2019-06-04
• 發明（設計）人: 侯天峰;張義輪;朱春波
• 申請（專利權）人: 三星電子（中國）研發中心;三星電子株式會社
• 主分類號: G06T3/40
• 分類號: G06T3/40;G06T5/00
• 代理公司: 北京英賽嘉華知識產權代理有限責任公司 11204
• 代理人: 王達佐;馬曉亞

1.一種視頻圖像局部區域放大的方法，其特征在于，包括：

確定視頻中目標片段內每幀圖像的感興趣區域，所述視頻包括一個或多個片段；

根據位于所述感興趣區域中的第一圖像的自相似性，對所述第一圖像進行第一超分辨率重構，得到第二圖像；

通過迭代反投影IBP算法，對所述第二圖像進行第二超分辨率重構，得到第三圖像；

顯示所述第三圖像；

其中，所述顯示所述第三圖像包括同時顯示所述第三圖像和相應的幀圖像。

2.根據權利要求1所述的方法，其特征在于，所述確定視頻中目標片段內每幀圖像的感興趣區域，包括：

確定所述目標片段的第一幀圖像的感興趣區域；

根據所述第一幀圖像的感興趣區域，預測所述目標片段中其他幀圖像的感興趣區域。

3.根據權利要求2所述的方法，其特征在于，所述確定所述目標片段的第一幀圖像的感興趣區域，包括：

獲取所述第一幀圖像的顯著度信息和角點分布信息；

根據所述顯著度信息和所述角點分布信息，確定所述第一幀圖像的感興趣區域。

4.根據權利要求2所述的方法，其特征在于，所述其他幀圖像的感興趣區域，是根據其上一幀的感興趣圖像區域和感興趣區域運動跟蹤算法預測的。

5.根據權利要求4所述的方法，其特征在于，所述運動跟蹤包括如下任一項：基于主動輪廓的跟蹤、基于特征的跟蹤、基于區域的跟蹤、基于模型的跟蹤。

6.根據權利要求1至5中任一項所述的方法，其特征在于，還包括：

根據針對所述感興趣區域的設置操作，調整所述感興趣區域的位置和范圍。

7.根據權利要求1所述的方法，其特征在于，所述根據位于所述感興趣區域中的第一圖像的自相似性，對所述第一圖像進行第一超分辨率重構，得到第二圖像，包括：

獲取所述第一圖像的N級放大圖像和N-1級放大高頻信息圖像，所述N級放大圖像是通過放大N級放大輸入圖像得到的，所述N-1級放大高頻信息圖像是根據所述N級放大輸入圖像得到的，所述N級放大輸入圖像是根據N-1級放大圖像與N-2級放大高頻信息圖像之間的相似性，將所述N-2級放大高頻信息圖像疊加到所述N-1級放大圖像上得到的，其中，N大于或等于2；

根據所述N級放大圖像與所述N級放大輸入圖像之間的相似性，獲取所述N級放大圖像與所述N-1級放大高頻信息圖像之間的位置對應關系；

根據所述位置對應關系，將所述N-1級放大高頻信息圖像疊加到所述N級放大圖像上，得到所述第二圖像。

8.根據權利要求7所述的方法，其特征在于，所述N-1級放大高頻信息圖像是通過對所述N級放大輸入圖像進行高斯濾波獲取的。

9.根據權利要求1所述的方法，其特征在于，所述通過迭代反投影IBP算法，對所述第二圖像進行第二超分辨率重構，得到第三圖像，包括：

獲取初始估計圖像的模擬低分辨率圖像，所述初始估計圖像為所述第二圖像；

比較所述模擬低分辨率圖像與所述第一圖像；

根據比較結果獲取模擬誤差圖像；

根據所述模擬誤差圖像，對所述第二圖像進行修正，得到所述第三圖像。

10.根據權利要求9所述的方法，其特征在于，所述獲取初始估計圖像的模擬低分辨率圖像，包括：

對所述第二圖像進行高斯濾波；

通過雙線性差值方式，對進行高斯濾波后的第二圖像進行下采樣，得到所述模擬低分辨率圖像。

11.根據權利要求9所述的方法，其特征在于，所述根據所述模擬誤差圖像，對所述第二圖像進行修正，得到所述第三圖像，包括：

將所述第二圖像與目標圖像進行加法運算，得到所述第三圖像，所述目標圖像為所述誤差圖像與小于或等于1的正數進行乘法運算后得到的。