[發明專利]主動式視頻濃縮裝置及方法

有效

• 申請號: 201310611321.0
• 申請日: 2013-11-26
• 公開（公告）號: CN103617234B
• 公開（公告）日: 2017-10-24
• 發明（設計）人: 胡傳平;唐世杰;尚巖峰;梅林;齊力;劉云淮;鄭旭平;王春;黃國政;李超;譚懿先;陳健;徐磊;王文斐;梁辰;徐小明;高鑫;潘淳
• 申請（專利權）人: 公安部第三研究所
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 上海天翔知識產權代理有限公司31224
• 代理人: 劉常寶

技術領域

本發明涉及一種視頻處理技術，具體涉及一種視頻濃縮（即生成視頻摘要）的技術。

背景技術

在社會公共安全領域，視頻監控系統成為維護社會治安，加強社會管理的一個重要組成部分。然而視頻錄像存在存儲數據量大，存儲時間長等特點，通過錄像尋找線索，獲取證據傳統的做法是要耗費大量人力、物力以及時間，效率極其低下，以至于錯過最佳破案時機。

視頻摘要是對視頻內容的一個簡單概括，以自動或半自動的方式，先通過運動目標分析，提取運動目標，然后對各個目標的運動軌跡進行分析，將不同的目標重組并拼接到共同的背景場景中，形成視頻。因此在視頻監控系統中，人們可以通過視頻摘要快速瀏覽，鎖定檢索對象，對于公安加快破案速度，提高大案、要案的破案效率具有重要指導意義。

視頻媒體的無結構性是阻礙新一代視頻應用的瓶頸問題，為了解決視頻的無結構性問題，研究者提出了視頻結構化描述的技術途徑。視頻結構化描述技術包含兩層含義：對視頻中目標特征的識別和提取形成描述信息文本，基于描述信息實現視頻內容檢索與數據挖掘。

傳統的生成視頻摘要的技術主要有兩種：第一種方法是基于視頻關鍵幀的視頻摘要，此方法首先獲取視頻的關鍵幀，然后通過分級聚類的方法檢測視頻片段的相似度，將相似度超過閾值的片段去除，將保留下來的部分拼接成視頻摘要；另一種方法是基于視頻特征的視頻摘要，此方法是根據提取的輸入視頻的特征，計算視頻的精彩度，并將精彩度較高的精彩鏡頭通過簡單地拼接，形成視頻摘要。

但是這兩種方法所形成的視頻摘要都無法滿足用戶獲取特定目標的信息的要求。并且這兩種方法都是由視頻片段拼接起來的，仍存在時長較長、運動不緊湊的問題。

發明內容

針對上述現有技術，本發明的目的在于提供一種主動式視頻濃縮方案，用于解決現有的視頻摘要方法無法滿足用戶對指定特定目標生成摘要視頻的需求，以及傳統技術所產生的摘要視頻時長較長、運動不緊湊的問題。

為了達到上述目的，本發明采用如下的技術方案：

一種主動式視頻濃縮裝置，所述裝置包括：

視頻結構化描述模塊，所述視頻結構化描述模塊用于對輸入視頻進行分析，生成視頻結構化描述文件；

存儲管理模塊，所述存儲管理模塊用于儲存及管理視頻結構化描述文件，并根據視頻結構化描述文件建立的數據庫；

檢索模塊，所述檢索模塊對存儲管理模塊中的視頻結構化描述文件進行檢索，并將檢索結果按照其相關度排序；

視頻濃縮摘要模塊，所述視頻濃縮摘要模塊用于生成符合檢索條件的摘要視頻，在不丟失運動目標并且不重疊或沒有嚴重重疊前提下，將不同時間段出現的運動目標平移到同一時間段，濃縮為摘要視頻。

在濃縮裝置的優選實例中，所述視頻結構化描述模塊生成的視頻結構化描述文件包括目標特征描述文件和目標軌跡描述文件，所述目標特征描述文件包含每個目標的描述信息；所述目標軌跡描述文件包含每個目標軌跡的基本信息。

進一步的，所述存儲管理模塊通過視頻結構化描述文件中的目標特征描述文件建立相關的數據庫，同時由數據庫管理目標特征描述文件的所有信息。

進一步的，所述視頻濃縮摘要模塊在生成摘要視頻時，根據目標軌跡描述文件提供軌跡對應的前景矩形序列的空間位置和時間信息，確保運動目標平移后不重疊或沒有嚴重重疊。

進一步的，所述視頻濃縮摘要模塊在生成摘要視頻時，對運動目標的平移是指對運動目標的時間的平移。

進一步的，所述視頻濃縮摘要模塊在生成摘要視頻時，對于多個目標軌跡相互重疊的區域以透明貼圖的形式確保每個目標都可見；同時對摘要視頻中的每個目標標注其原始的時間戳和前景矩形，并實現了視頻索引功能，點擊運動目標即可跳轉至對應的原始視頻片段。

一種主動式視頻濃縮的方法，該方法包括如下步驟：

（1）對輸入視頻進行分析，生成視頻結構化描述文件，并根據生成的結構化描述文件建立相關數據庫；

（2）對建立的數據庫進行檢索，并將檢索結果按照相關度排序；

（3）根據步驟（2）檢索結果，對目標軌跡篩選及重排，在確保運動目標平移后不重疊或沒有嚴重重疊的前提下，將不同時間段出現的運動目標平移到同一時間段，濃縮為摘要視頻。

在該方法的優選方案中，所述步驟（1）中生成的視頻結構化描述文件具體包括：目標特征描述文件和目標軌跡描述文件，所述目標特征描述文件包含每個目標的描述信息，所述目標軌跡描述文件包含每個目標的基本信息。