[發明專利]一種基于有監督視頻分割的視頻摘要方法

有效

• 申請號: 201710954324.2
• 申請日: 2017-10-13
• 公開（公告）號: CN107886109B
• 公開（公告）日: 2021-06-25
• 發明（設計）人: 張靜;石玥;蘇育挺;井佩光
• 申請（專利權）人: 天津大學
• 主分類號: G06K9/62
• 分類號: G06K9/62;G06F16/70
• 代理公司: 天津市北洋有限責任專利代理事務所 12201
• 代理人: 李林娟

1.一種基于有監督視頻分割的視頻摘要方法，其特征在于，所述視頻摘要方法包括以下步驟：

1)對N₁幀的訓練視頻和N₂幀的測試視頻，分別提取顏色直方圖特征，構建一個N₂*N₁的相似性矩陣S_k；通過相似性矩陣和訓練視頻的核矩陣，獲取測試視頻的核矩陣，將測試視頻的核矩陣作為時域子空間聚類的正則化拉普拉斯矩陣；

2)引入時域拉普拉斯正則化表達式，獲取目標函數，并通過交替方向乘子法對目標函數進行求解，得到分割后的每一段視頻幀，并計算每一段視頻幀的分數；

3)通過背包問題選擇合適的片段作為視頻摘要；

4)將獲取到的視頻摘要與人工標注的視頻摘要進行對比，調整各參數來進行多次試驗，使視頻摘要與人工標注更接近；

其中，引入時域拉普拉斯正則化表達式，獲取目標函數具體為：

時域拉普拉斯正則化表達式是測試視頻的核矩陣L，將核矩陣L與權重矩陣W融合得到新的權重矩陣H，得到的目標函數是f(Z)為時域拉普拉斯正則化表達式；λ₁為權衡參數；D^d×r是一個字典，Z^r×k是一個編碼矩陣；d為顏色直方圖特征的維數；r為視頻所有幀的數目；k為視頻第k幀的索引；X≈DZ；捕獲了重建損失，用來建立矩陣X的全局子空間結構。

2.根據權利要求1所述的一種基于有監督視頻分割的視頻摘要方法，其特征在于，在步驟1)之前，所述視頻摘要方法還包括：

獲取訓練視頻的核矩陣，該核矩陣由用戶的評測幀得分矩陣經過對角化得到。

3.根據權利要求1所述的一種基于有監督視頻分割的視頻摘要方法，其特征在于，所述測試視頻的核矩陣具體為：

其中，L為測試視頻的核矩陣；L_k為訓練視頻的核矩陣；T為轉置。