[發明專利]視覺屏蔽雙層AP視頻摘要生成方法

有效

• 申請號: 201910823672.5
• 申請日: 2019-09-02
• 公開（公告）號: CN110674347B
• 公開（公告）日: 2022-04-01
• 發明（設計）人: 劉佶鑫;余丹
• 申請（專利權）人: 南京郵電大學
• 主分類號: G06F16/738
• 分類號: G06F16/738;G06F16/75
• 代理公司: 南京縱橫知識產權代理有限公司 32224
• 代理人: 許婉靜

本發明公開一種視覺屏蔽雙層AP視頻摘要生成方法，首先，利用壓縮感知技術得到壓縮之后的視頻，使視頻具有視覺屏蔽的效果以保護被監控對象隱私，同時數據量大大縮小；然后，對壓縮后的視頻提取PHOG特征，對得到的特征經過第一步AP聚類，得到第一階段的視頻摘要；最后，我們對第一階段的關鍵幀提取PHOG和Hist融合特征，將融合后的PHOG?Hist特征進行第二步AP聚類，得到最終的視頻摘要。本發明在保護被監控對象隱私的同時大大降低數據量，實現了快速提取關鍵幀同時兼顧安全監控與隱私保護，具有冗余度低和漏幀少的優勢，且計算復雜度低，實時性強，對視覺屏蔽后的視頻具有魯棒性優勢。

技術領域

本發明屬于圖像處理技術領域，具體涉及一種視覺屏蔽雙層AP視頻摘要生成方法。

背景技術

近年來，多媒體技術、計算機網絡發展迅猛，信息化程度不斷提高，傳統的信息檢索系統己經無法處理這些數量巨大且迅速增長的媒體數據，因此人們迫切需要一種新的自動化的方法來處理、分析和檢索網上海量的多媒體數據，尤其是視頻數據。視頻的流媒體特性使其在處理、分析和內容理解上是最具挑戰性的數據類型，基于關鍵幀提取視頻摘要是獲取視頻基本內容的途徑之一。視頻的關鍵幀提取就是用盡可能少的靜態圖像來最大化地表示出原始視頻的主要內容，該主要內容既可以是用戶需要重點關注的視頻內容，也可以是視頻內容前后發生明顯變化的部分。視頻數據的這種摘要形式可以節省更多的存儲空間和閱覽時間，這在視頻分析、視頻壓縮和視頻檢索等許多其他應用中有非常重要的作用。

隨著智能家居的興起與4G、光纖等網絡帶寬速度的大幅度提高，視頻圖像的數據量呈幾何級的增長態勢，針對視頻數據，如何對其進行索引從而最終快速準確的進行檢索成為迫切的需求。而對于類似于居家環境或網約車等公共場所的監控，不論是被監控的老人或小孩，還是網約車的司機或乘客，都不愿意自己的行為被完全地暴露在監控的視頻中，因此，我們在保護被監控對象的人身安全的同時，還要保護被監控對象的隱私。如何做到快速提取關鍵幀，同時兼顧安全監控與隱私保護，現有的視頻摘要技術并沒有有效的解決方案。

發明內容

本發明的目的是針對現有技術存在的問題，提供一種視覺屏蔽雙層AP視頻摘要生成方法，解決部分涉及隱私保護場景下的視頻的關鍵幀提取問題，該方法將視頻經過壓縮感知技術得到壓縮之后的視頻，使視頻具有視覺屏蔽的效果，以達到保護被監控對象隱私的目的，同時數據量大大縮小，通過雙層吸引子傳播算法的應用，使得提出的關鍵幀提取方法具有冗余度低和漏幀少的優勢，且計算復雜度低，實時性強，對視覺屏蔽后的視頻具有魯棒性優勢。

為實現上述目的，本發明采用的技術方案是：

視覺屏蔽雙層AP視頻摘要生成方法，包括以下步驟：

步驟1，獲取待處理視頻；

步驟2，對待處理視頻進行視覺屏蔽，得到降維后的視頻；

步驟3，對降維后的視頻的每一幀提取PHOG特征得到N維特征序列{b₁,b₂,…,b_N}；

步驟4，對N維特征序列{b₁,b₂,…,b_N}進行分組，每N_τ幀為一組，分出S組；

步驟5，采用AP算法對S組特征序列分別聚類，得到第一階段的S組關鍵幀；

步驟6，合并S組關鍵幀，得到第一階段的關鍵幀序列；

步驟7，提取第一階段關鍵幀的灰度直方圖特征，與對應的PHOG特征進行融合得到PHOG-Hist融合特征序列{c₁,c₂,…,c_N1}；

步驟8，采用AP算法對融合特征序列{c₁,c₂,…,c_N1}進行聚類，得到最終的輸出視頻摘要。