[發明專利]一種基于事件模型的足球視頻集錦自動合成方法

有效

• 申請號: 201110294384.9
• 申請日: 2011-09-30
• 公開（公告）號: CN102427507A
• 公開（公告）日: 2012-04-25
• 發明（設計）人: 趙沁平;陳小武;蔣愷
• 申請（專利權）人: 北京航空航天大學
• 主分類號: H04N5/222
• 分類號: H04N5/222
• 代理公司: 北京科迪生專利代理有限責任公司 11251
• 代理人: 許玉明;顧煒

1.一種基于事件模型的足球視頻集錦自動合成方法，其特征在于包含以下步驟：

(1)定義足球視頻集錦片段是由單人或多人進行的、可分解為多動作組合的重要足球事件；

(2)構建一個核心-周圍事件模型，根據動作發生概率，指定最可能發生的動作為核心動作，其余動作均為周圍動作，該事件模型具體包括動作語義關系、動作時序關系和局部視覺特征三個部分；

(3)利用足球比賽視頻及其對應的文本解說詞構建訓練集，選擇進球和紅黃牌作為兩類足球集錦，分別從動作語義關系、動作時序關系和局部視覺特征三個方面訓練所述核心-周圍事件模型；

(4)輸入一段沒有解說詞的足球比賽視頻，利用訓練得到的事件模型在輸入視頻中提取足球集錦片段，并給出候選集錦片段與模型的匹配分數；

(5)將足球集錦片段分類按照匹配分數排序，將分數較高的足球集錦片段自動合成為一個足球視頻集錦。

2.根據權利要求1所述的基于事件模型的足球視頻集錦自動合成方法，其特征在于：步驟(1)中以視頻事件作為足球集錦片段單元，針對某個類型的足球集錦片段單獨進行足球視頻集錦。

3.根據權利要求1所述的基于事件模型的足球視頻集錦自動合成方法，其特征在于：步驟(2)的核心-周圍事件模型要求事件可被分解為多個動作，所述核心-周圍事件模型主要建模三個部分內容：

(2.1)動作語義關系包括每個動作發生的概率，以及每個周圍動作和核心動作同時出現的概率；

(2.2)動作時序關系包括動作在事件發生過程中的先后順序，以及動作持續時間與事件持續時間的比值；

(2.3)局部視覺特征包括每個動作在運動持續過程中的梯度和光流統計特征。

4.根據權利要求1所述的基于事件模型的足球視頻集錦自動合成方法，其特征在于：步驟(3)中要求輸入的足球比賽視頻文本解說詞含有時間記錄及事件記錄，能夠與視頻時間相對應，針對某類型足球集錦訓練所述核心-周圍的步驟如下：

(3.1)輸入一系列足球比賽視頻及其對應的文本解說詞，從解說詞中提取關鍵詞，并根據解說詞的事件記錄，統計每個關鍵詞的出現概率，以及多個關鍵詞同時出現的概率；

(3.2)選定出現概率最大的關鍵詞為核心關鍵詞；

(3.3)將解說詞與足球比賽視頻相對應，記錄關鍵詞出現時間，并統計關鍵詞表示的動作持續時間與事件持續時間；

(3.4)在關鍵詞出現時間段計算時空興趣點的梯度特征和光流特征，統計梯度直方圖和光流直方圖作為動作的局部視覺特征。

5.根據權利要求1所述的基于事件模型的足球視頻集錦自動合成方法，其特征在于：步驟(4)輸入一段足球比賽視頻，其集錦片段提取過程分為以下步驟：

(4.1)在輸入視頻上分別檢測核心動作和周圍動作，得到所有動作的出現時間段；

(4.2)以核心動作為基準，結合動作時序關系確定事件發生時間段計為候選足球集錦片段；

(4.3)在候選足球集錦片段匹配事件模型，得出模型匹配分數。

6.根據權利要求1所述的基于事件模型的足球視頻集錦自動合成方法，其特征在于：步驟(5)中將若干候選足球集錦片段組合為足球視頻集錦時，根據用戶需要的集錦類型和視頻長度對每個足球集錦片段開始與結尾部分做過渡處理。