[發明專利]一種視頻摘要生成方法及裝置

在審

• 申請號: 201610425059.4
• 申請日: 2016-06-13
• 公開（公告）號: CN107493520A
• 公開（公告）日: 2017-12-19
• 發明（設計）人: 康鵬濤
• 申請（專利權）人: 合肥君正科技有限公司
• 主分類號: H04N21/8549
• 分類號: H04N21/8549
• 代理公司: 北京匯澤知識產權代理有限公司11228
• 代理人: 張瑾

技術領域

本發明涉及視頻識別技術領域，尤其涉及一種視頻摘要生成方法及裝置。

背景技術

隨著人們對安全的需求越來越高，視頻監控作為安全防范領域的有效解決方案，應用范圍越來越廣，需求在不斷提高。但視頻監控產生了海量信息，導致存儲的數據量越來越大，冗余的視頻信息量越來越多，獲取視頻有效的信息花費時間越來越長。

視頻識別技術能夠對感興趣物體進行結構化分析，但是并未對結構化分析的結果進行很好的挖掘和利用。視頻摘要作為一種降低視頻信息冗余、快速獲取有價值信息、減少存儲空間的新技術方案運用而生。視頻摘要的目的是降低碼流和存儲空間，用盡可能短的時間獲取盡可能多的用戶感興趣的信息。

視頻摘要是通過對視頻結構和內容分析，從原始視頻中提取有意義的部分，并將它們以某種方式進行組合而成的緊湊的、能充分表達視頻語義的內容，它是對視頻的簡單概括，觀眾可以通過觀看視頻摘要而準確的獲取視頻內容。視頻摘要可分為靜態視頻摘要和動態視頻摘要兩類，靜態視頻摘要一般是提取關鍵幀序列，通過多個關鍵幀組合成視頻得到視頻摘要。動態視頻摘要也稱為縮略視頻，相比關鍵幀序列，它由原始視頻中提取運動信息組成視頻，從而在語義方面增加視頻的表達力。

在實現本發明的過程中，發明人發現現有技術中至少存在如下技術問題：

通過提取關鍵幀序列獲取靜態視頻摘要，并不能覆蓋盡可能多的鏡頭從而得到最完備的視頻摘要，會因此造成大量信息的丟失，無法充分滿足用戶獲取全面信息的需求；動態視頻摘要基本都是以單一的視頻分析信息組成視頻，無法滿足用戶想同時獲取多個感興趣方面的需求。現有的視頻摘要生成方法無法根據多樣性的用戶需求完整準確地生成令人滿意的視頻摘要。

發明內容

本發明提供的視頻摘要生成方法及裝置，能夠根據多樣性的用戶需求完整準確地生成令人滿意的視頻摘要。

一方面，本發明提供一種視頻摘要生成方法，包括：

建立保存整個視頻摘要狀態的摘要句柄，采用抽幀的方法獲取抽取幀視頻識別分析的輸出結果、目標區域特征信息和區域特征信息數量；

判斷所述輸出結果是否為真；

當輸出結果為真時，根據目標區域特征信息噪音閾值，對目標區域特征信息進行過濾，更新所述輸出結果，并根據各目標是否出現的魯棒性閾值對所述輸出結果進行過濾；

判斷所述摘要句柄中的歷史結果和所述輸出結果是否為真；

根據判斷結果對所述目標區域特征信息、區域特征信息數量和摘要句柄進行更新處理，生成函數返回值；

當所述函數返回值為真時，對所抽取的幀作為視頻摘要進行編碼。

另一方面，本發明提供一種視頻摘要生成裝置，包括：

獲取單元，用于用于建立保存整個視頻摘要狀態的摘要句柄，采用抽幀的方法獲取抽取幀視頻識別分析的輸出結果、目標區域特征信息和區域特征信息數量；

第一判斷單元，用于判斷所述輸出結果是否為真；

第一過濾單元，用于當輸出結果為真時，根據目標區域特征信息噪音閾值，對目標區域特征信息進行過濾，更新所述輸出結果；

第二過濾單元，用于根據各目標是否出現的魯棒性閾值對所述輸出結果進行過濾；

第二判斷單元，用于判斷所述摘要句柄中的歷史結果和所述輸出結果是否為真；

生成單元，用于根據判斷結果對所述目標區域特征信息、區域特征信息數量和摘要句柄進行更新處理，生成函數返回值；

編碼單元，用于當所述函數返回值為真時，對所抽取的幀作為視頻摘要進行編碼。

本發明提供的視頻摘要生成方法及裝置，建立保存整個視頻摘要狀態的摘要句柄，采用抽幀的方法獲取抽取幀視頻識別分析的輸出結果、目標區域特征信息和區域特征信息數量，當判斷所述輸出結果為真時，根據目標區域特征信息噪音閾值，對目標區域特征信息進行過濾，更新所述輸出結果，并根據各目標是否出現的魯棒性閾值對所述輸出結果進行過濾，根據所述摘要句柄中的歷史結果和所述輸出結果是否為真的判斷結果對所述目標區域特征信息、區域特征信息數量和摘要句柄進行更新處理，生成函數返回值，當所述函數返回值為真時，對所抽取的幀作為視頻摘要進行編碼。與現有技術相比，本發明能夠采用抽幀的方法，對抽取幀進行用戶感興趣的視頻分析，獲得視頻分析的區域特征結果，根據時空的關聯性，以蹤跡為角度，從已獲得的視頻分析區域特征結果中提取滿足符合蹤跡的視頻幀，并對其進行編碼，從而能夠根據多樣性的用戶需求完整準確地生成令人滿意的視頻摘要。

附圖說明