[發(fā)明專利]視頻分析中的鏡頭關鍵幀提取方法及裝置

在審

• 申請?zhí)枺?/td>: 201610533693.X
• 申請日: 2016-07-07
• 公開（公告）號: CN107590419A
• 公開（公告）日: 2018-01-16
• 發(fā)明（設計）人: 白永強;羅旻
• 申請（專利權）人: 北京新岸線網(wǎng)絡技術有限公司
• 主分類號: G06K9/00
• 分類號: G06K9/00
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種視頻分析中的鏡頭關鍵幀提取方法，其特征在于，包括：

獲取待分析的視頻文件；

在設定的滑動窗口中，計算相鄰兩個視頻幀之間的距離；

根據(jù)每個滑動窗口中各相鄰視頻幀之間的距離，確定對視頻文件進行鏡頭分割的分割點；

根據(jù)確定出的分割點，將所述視頻文件分割為若干視頻鏡頭；

從分割出的各個視頻鏡頭中提取能夠代表鏡頭主要內容的鏡頭關鍵幀。

2.如權利要求1所述的方法，其特征在于，所述計算相鄰兩個視頻幀之間的距離，具體包括：

根據(jù)視頻幀的顏色直方圖，計算相鄰兩個視頻幀之間的直方圖距離；或

根據(jù)視頻幀的二值圖像，計算相鄰兩個視頻幀之間的歐氏距離。

3.如權利要求1所述的方法，其特征在于，所述根據(jù)每個滑動窗口中各相鄰視頻幀之間的距離，確定對視頻文件進行鏡頭分割的分割點，具體包括：

確定出在每個滑動窗口中相鄰兩個視頻幀之間的距離的最大值和兩個視頻幀之間的距離的平均值；

判斷所述距離的最大值和距離的平均值的比值，是否大于設定的距離變化閾值；

當判斷為是時，確定該相鄰兩個視頻幀為視頻切割點，否則認為該滑動窗口中不存在切割點。

4.如權利要求1-3任一所述的方法，其特征在于，所述從分割出的各個視頻鏡頭中提取能夠代表鏡頭主要內容的鏡頭關鍵幀，具體包括：

針對分割出的每個視頻鏡頭：

將視頻鏡頭中包含的各視頻幀，歸類到不同的視頻幀聚類中；

從每個視頻幀聚類中抽取離聚類質心最近的視頻幀作為該聚類的代表幀；

由抽取出的所有代表幀組成該鏡頭關鍵幀。

5.如權利要求4所述的方法，其特征在于，所述將視頻鏡頭中包含的各視頻幀，歸類到不同的視頻幀聚類中，具體包括：

針對視頻鏡頭中的每一個視頻幀：

計算當前幀與設定的視頻幀聚類的質心的距離，如果該距離大于設定的該視頻幀聚類的距離閾值，則當前幀不加入該視頻幀聚類中；否則記錄該視頻幀聚類為當前幀的備選視頻幀聚類；

如果當前幀與設定的所有設定的視頻幀聚類的質心的距離均大于設定的閾值，則以當前幀為質心形成新的視頻幀聚類；

否則從記錄的當前幀的備選視頻幀聚類中選擇與當前幀相似度最大的視頻幀聚類加入。

6.一種視頻分析中的鏡頭關鍵幀提取裝置，其特征在于，包括：

獲取模塊，用于獲取待分析的視頻文件；

鏡頭分割模塊，用于在設定的滑動窗口中，計算相鄰兩個視頻幀之間的距離；根據(jù)每個滑動窗口中各相鄰視頻幀之間的距離，確定對視頻文件進行鏡頭分割的分割點；根據(jù)確定出的分割點，將所述視頻文件分割為若干視頻鏡頭；

第一提取模塊，用于從分割出的各個視頻鏡頭中提取能夠代表鏡頭主要內容的鏡頭關鍵幀。

7.如權利要求6所述的裝置，其特征在于，所述鏡頭分割模塊，具體用于：

根據(jù)視頻幀的顏色直方圖，計算相鄰兩個視頻幀之間的直方圖距離；或

根據(jù)視頻幀的二值圖像，計算相鄰兩個視頻幀之間的歐氏距離。

8.如權利要求6所述的裝置，其特征在于，所述鏡頭分割模塊，具體用于：

確定出在每個滑動窗口中相鄰兩個視頻幀之間的距離的最大值和兩個視頻幀之間的距離的平均值；

判斷所述距離的最大值和距離的平均值的比值，是否大于設定的距離變化閾值；

當判斷為是時，確定該相鄰兩個視頻幀為視頻切割點，否則認為該滑動窗口中不存在切割點。

9.如權利要求6-8任一所述的裝置，其特征在于，所述第一提取模塊，具體用于：

針對分割出的每個視頻鏡頭：

將視頻鏡頭中包含的各視頻幀，歸類到不同的視頻幀聚類中；

從每個視頻幀聚類中抽取離聚類質心最近的視頻幀作為該聚類的代表幀；

由抽取出的所有代表幀組成該鏡頭關鍵幀。

10.如權利要求9所述的裝置，其特征在于，所述第一提取模塊，具體用于：

針對視頻鏡頭中的每一個視頻幀：

計算當前幀與設定的視頻幀聚類的質心的距離，如果該距離大于設定的該視頻幀聚類的距離閾值，則當前幀不加入該視頻幀聚類中；否則記錄該視頻幀聚類為當前幀的備選視頻幀聚類；

如果當前幀與設定的所有設定的視頻幀聚類的質心的距離均大于設定的閾值，則以當前幀為質心形成新的視頻幀聚類；

否則從記錄的當前幀的備選視頻幀聚類中選擇與當前幀相似度最大的視頻幀聚類加入。