[發明專利]一種基于分層結構的事件視頻檢測系統

有效

• 申請號: 201010179184.4
• 申請日: 2010-05-17
• 公開（公告）號: CN101873414A
• 公開（公告）日: 2010-10-27
• 發明（設計）人: 姚丹亞;張盈盈;彭黎輝;張毅
• 申請（專利權）人: 清華大學
• 主分類號: H04N5/222
• 分類號: H04N5/222;H04N5/262;G06K9/00
• 代理公司: 北京眾合誠成知識產權代理有限公司 11246
• 代理人: 朱琨

1.一種基于分層結構的事件視頻檢測系統，其特征在于是基于把視頻事件檢測流程進行層次劃分，包括交通、社會治安在內的以固定視頻場景為檢測區的事件綜合視頻檢測系統，其中含有視頻圖像采集部分、視頻處理部分、數據存儲部分和應用服務部分，其中：

視頻圖像采集部分，是數字攝像機、輸出附帶圖像采集卡的模擬攝像機和便攜式設備中的任意一種，

視頻處理部分是一臺視頻數據處理服務器，含有事件檢測模塊、線索提取模塊、對象提取模塊以及視頻數據基礎處理模塊，其中：

視頻數據基礎處理模塊，先把視頻圖像轉換成以幀為單位的無壓縮視頻圖像序列，然后對該圖形序列進行依次包括彩色圖像灰度化、去噪以及增強在內的預處理操作，設有：待檢視頻圖像輸入端、用于進行目標分割與識別的bmp格式圖像序列輸出端以及事件佐證圖像或視頻的輸出端，

對象提取模塊，從所述視頻處理服務器輸入所述bmp格式圖像序列后，按以下處理后，輸出圖像特征數據和對象特征數據，

步驟(a1)，逐幀提取基本圖像特征信息，具體包括雨雪天氣造成的視頻噪聲在內的噪聲信息以及包括交通事件的標志、標記在內的內部標記信息，

步驟(a2)，用背景差減法分離出前景信息與背景信息，

步驟(a3)，對于所述前景信息進行圖像分割，提取感興趣的對象及該對象的特征數據，并提取圖像特征信息，

單幀圖像特征對應于圖像的彩色信息，至少包括顏色分布特征、邊緣和輪廓特征、幾何特征和統計特征，

多幀圖像組合特征對應于通過圖像的幀間差異獲得的圖像特征變化，其中至少包括場景變換和對象移動，

所述圖像特征數據，包括：所述單幀圖像特征和多幀組合特征，每一個圖像特征對應一個特征那個編號，

所述對象特征數據，包括：ID、位置、形狀、大小、規則度、顏色特征、速度特征和軌跡特征，在交通場合還包括車輛的牌照信息，

線索提取模塊，是一個檢測線索提取的模塊，所述檢測線索分為低層線索和組合線索，其中：

低層線索，是指具有明確物理或幾何意義的簡單線索，包括：速度快慢、速度變化規律，活動區域，形狀及是否含有牌照信息，

組合線索，是指具有明確的組合物理意義的高級線索，在交通場景中，包括對象識別結果以及包括目標重疊、目標分離、出現新對象在內的對象組合特征，

所述線索檢測模塊，從所述對象提取模塊輸入經封裝的所述圖像特征數據和對象特征數據，所述線索檢測模塊輸出為線索判定結果，包括：分類ID、內容ID、線索內容及線索定義，其中：

分類ID為0或1，分別代表低層線索和組合線索，

內容ID，用于區分所述分類ID相同的層次內線索，至少包括快速目標，大體積目標和靜止目標，

線索定義，給出每個線索的詳細判定標準；

事件檢測模塊，通過對所述線索提取模塊的輸出端數據與事件定義的匹配完成對事件的判定，在交通場景下，所述事件至少包括：自由流停車、機動車擁堵、貨物遺灑、機動車逆行、排隊超限、行人闖入及闖紅燈和違章調頭，社會治安場景至少包括：人群聚集、打架斗毆和搶劫，事件定義的數據結構中包括：事件ID、事件內容以及事件定義，在完成判定后，分別向所述應用部分和數據存儲部分輸出事件檢測結果，同時，向所述視頻數據基礎處理模塊輸出已檢測到的事件對應的圖像/圖像序列幀號以及數據存儲輸出指令，由所述視頻數據基礎處理模塊向所述數據存儲部分輸出視頻或圖像；

數據存儲部分，是一個數據存儲服務器，其中安裝有一臺數據存儲計算機，所述數據存儲計算機分別從所述視頻數據基礎處理模塊輸入“佐證”視頻資料，從對象提取模塊輸入檢測對象基礎數據，從所述線索提取模塊輸入線索層面抽象數據，以及從所述事件檢測模塊輸入事件檢測結果，并通過與一個數據處理計算機的直接數據交換，輸各項信息以供外部應用程序直接從各個抽象層次訪問原始視頻，

應用服務部分，是一臺應用計算機，直接把從所述視頻處理服務器輸入的事件檢測結果進行輸出并報警。