[發明專利]一種實時視頻智能系統及其處理方法

無效

• 申請號: 201210158761.0
• 申請日: 2012-05-18
• 公開（公告）號: CN102724386A
• 公開（公告）日: 2012-10-10
• 發明（設計）人: 尚凌輝;王百超;陳石平;楊永明;劉嘉;高勇
• 申請（專利權）人: 浙江捷尚視覺科技有限公司
• 主分類號: H04N5/21
• 分類號: H04N5/21;H04N7/18
• 代理公司: 杭州賽科專利代理事務所 33230
• 代理人: 陳輝

技術領域

本發明涉及一種實時視頻智能系統及其處理方法。

背景技術

現有的監控視頻在偵查領域的應用日益頻繁，目前對監控視頻增強、處理的需求非常迫切。由于監控視頻拍攝環境場景復雜及設備本身、布設等因素，導致往往出現各種降質，如雨霧、風沙、低照度、逆光、對比不足、色偏、鏡頭變形等等?，F有的視頻瀏覽工具往往只提供簡單的回放，對各種降質沒有針對性的恢復工具；通用性的圖像增強軟件需要將視頻中的圖像截取后再進行處理，不但步驟繁瑣，且一些動態的信息無法依靠靜態的圖像來展現，如步態、行為、習慣等特征。

發明內容

本發明針對現有技術存在的缺陷，提供一種實時視頻智能系統及其處理方法，能有效完成視頻降質恢復，與視頻影像播放同步進行，可一站式解決多種問題，使用方便。

為此，本發明采取如下技術方案：一種實時視頻智能系統，其特征在于包括以下功能模塊：

播放控制模塊：具備視頻播放，暫停、快進、快退、拖拽、步進、步退的控制方式；

解碼模塊：負責視頻解碼；

區域選擇跟蹤模塊：用于選擇用戶關心的目標，并對目標運動進行跟蹤；

場景處理模塊：對視頻的降質進行恢復；

無級放大模塊：利用高級樣條插值方法，對視頻內容進行連續放大，并可跟隨區域移動；

顯示模塊：將原視頻經區域、處理、放大后的結果顯示；

錄制編碼模塊：將結果視頻進行錄制導出；

同步模塊：利用池原理，將各個模塊處理的流程同步。

所述的場景處理模塊包括雨霧去除、夜景恢復、逆光曝光修正、噪聲抑制、編碼塊噪聲恢復、焦距修正、色偏校正和魚眼變形校正。

首先由解碼模塊將視頻源解碼出幀，由區域選擇跟蹤模塊對存在區域的幀進行判斷，如有區域，則將區域內部分裁切后作為進一步處理的數據源，如無區域則將整個幀作為源，然后進入場景處理模塊對幀進行處理恢復，處理后的影像進入顯示模塊進行顯示，如需錄制則利用編碼模塊，將影像重新編碼為視頻。

場景處理模塊的具體處理方案如下：視頻解碼時利用緩存池進行速度同步調節。采用對比度、亮度、顏色綜合調整的改進Retinex?算法，自適應校正光照問題。利用增強去噪、邊緣去噪算法以減少低照度下的強噪聲。將傳統單幀NLM算法推廣為多幀算法，對視頻中的隨機噪聲進行自動恢復。結合8×8編碼塊先驗知識，對視頻中的編碼塊噪聲進行針對性恢復。利用空域銳化算法，增強視頻中的各種細節、輪廓部分，消弱焦距不準帶來的模糊效應。研究建立魚眼變形模型，逆推出變形恢復算法。

本發明具有如下優點：

1.對監控視頻各種降質，如低照度、雨霧、噪聲、壓縮塊、色偏等問題進行有效恢復。

2.視頻播放、處理同步進行，相較傳統的截取圖像、導入第三方軟件處理、繼續查看過程，本系統更為簡單便捷。

3.在恢復影像質量的同時，不會損失動作、行為等動態信息，有助于刑偵應用。

4.設有簡單易用的放大鏡功能，放大效果良好，可隨意進行拖動漫游，方便局部重點查看。

5.系統具備播放器全部功能，另有錄制等功能，方便保存各種處理結果以備后用。

附圖說明

圖1為本發明的系統結構示意圖。

圖2為本發明的系統處理流程示意圖。

具體實施方式

下面通過實施例，對本發明的技術方案作進一步具體的說明。

如圖1所示的實時視頻智能系統，包括以下功能模塊：

播放控制模塊：具備視頻播放，暫停、快進、快退、拖拽、步進、步退的控制方式。

解碼模塊：負責視頻解碼。

區域選擇跟蹤模塊：用于選擇用戶關心的目標，并對目標運動進行跟蹤。

場景處理模塊：對視頻的降質進行恢復；場景處理模塊包括雨霧去除、夜景恢復、逆光曝光修正、噪聲抑制、編碼塊噪聲恢復、焦距修正、色偏校正和魚眼變形校正。

無級放大模塊：利用高級樣條插值方法，對視頻內容進行連續放大，并可跟隨區域移動。

顯示模塊：將原視頻經區域、處理、放大后的結果顯示。

錄制編碼模塊：將結果視頻進行錄制導出。

如圖2所示，實時視頻智能系統的處理流程如下：

1.視頻解碼：

將視頻流進行解碼，并到幀。由于解碼速度與后處理速度不一致，可利用緩存池進行速度同步調節。

2.帶區域的視頻幀數據

解碼出的幀如有區域，則將區域內部分裁切后作為進一步處理的數據源，如無區域則可將整個幀作為源。