[發明專利]視頻標記方法、裝置及視頻監控方法和系統

有效

• 申請號: 201610405207.6
• 申請日: 2016-06-08
• 公開（公告）號: CN107483879B
• 公開（公告）日: 2020-06-09
• 發明（設計）人: 韋薇;王啟貴;謝思遠
• 申請（專利權）人: 中興通訊股份有限公司
• 主分類號: H04N7/18
• 分類號: H04N7/18;H04N5/76;G06F16/783
• 代理公司: 深圳市世紀恒程知識產權代理事務所 44287
• 代理人: 王韜

1.一種視頻標記方法，包括：

提取視頻文件之音頻信號的聲音特征；

將提取的聲音特征與音頻事件庫中各音頻事件進行匹配；所述音頻事件基于事件發生時產生的音頻信號的聲音特征而建立；

如與至少一個所述音頻事件匹配成功，在所述視頻文件對應位置對發生的該音頻事件進行事件標記；

其中，提取視頻文件之音頻信號的聲音特征為根據預設的檢測周期進行提取；所述方法還包括：

在相鄰檢測周期所提取的音頻信號的聲音特征都與至少一個音頻事件匹配成功時，根據預設的事件合并規則判斷是否對所述相鄰兩個檢測周期內發生的音頻事件進行合并；如是，將前一個檢測周期內音頻事件的開始時間作為當前檢測周期內音頻事件的開始時間；否則，設置前一個檢測周期內的音頻事件的結束時間和當前檢測周期內的音頻事件的開始時間為當前檢測周期的開始時間。

2.如權利要求1所述的視頻標記方法，其特征在于，所述提取視頻文件之音頻信號的聲音特征在視頻錄制過程中進行。

3.如權利要求1所述的視頻標記方法，其特征在于，提取所述音頻信號的聲音特征并與音頻事件進行匹配包括：

將所述音頻信號變換到時頻域提取其前景信號；

從所述前景信號中提取聲音特征集合，計算該聲音特征集合與所述音頻事件的相似度，得到的相似度大于設定的相似度閾值時，匹配成功。

4.如權利要求1-3任一項所述的視頻標記方法，其特征在于，在所述視頻文件對應位置對發生的所述音頻事件進行事件標記包括進行以下標記中的至少一種：

在所述視頻文件的關鍵視頻幀位置標記所述音頻事件發生的開始時間；

獲取并標記發生的所述音頻事件之聲源相對拾音器的方向和/或距離信息；

獲取并標記發生的所述音頻事件對應的嚴重度級別；

獲取并標記所述音頻事件的名稱。

5.如權利要求4所述的視頻標記方法，其特征在于，獲取所述音頻事件對應的嚴重度級別包括：

根據錄制所述視頻文件的位置信息和/或當前音頻事件發生后的持續時間，確定所述音頻事件當前對應的嚴重度級別。

6.如權利要求5所述的視頻標記方法，其特征在于，在所述視頻文件對應位置進行事件標記包括對音頻事件對應的嚴重度級別進行標記時，還包括：根據嚴重度級別與標記格式對應關系表，選擇與當前音頻事件模型的嚴重度級別對應的標記格式進行標記。

7.一種視頻監控方法，包括：

進行監控視頻錄制；

在視頻錄制過程中，通過如權利要求1-6任一項所述的視頻標記方法對錄制得到的視頻文件進行事件標記；

對視頻文件完成一個事件標記后，將事件標記部分的視頻文件進行告警顯示。

8.一種視頻標記裝置，其特征在于，包括：

特征提取模塊，用于提取視頻文件之音頻信號的聲音特征；

處理模塊，用于將所述聲音特征與音頻事件庫中各音頻事件進行匹配；所述音頻事件基于事件發生時產生的音頻信號的聲音特征而建立；

標記模塊，用于在與至少一個所述音頻事件匹配成功，在所述視頻文件對應位置對發生的該音頻事件進行事件標記；

其中，提取視頻文件之音頻信號的聲音特征為根據預設的檢測周期進行提取；

所述處理模塊，還用于在相鄰檢測周期所提取的音頻信號的聲音特征都與至少一個音頻事件匹配成功時，根據預設的事件合并規則判斷是否對所述相鄰兩個檢測周期內發生的音頻事件進行合并；如是，將前一個檢測周期內音頻事件的開始時間作為當前檢測周期內音頻事件的開始時間；否則，設置前一個檢測周期內的音頻事件的結束時間和當前檢測周期內的音頻事件的開始時間為當前檢測周期的開始時間。

9.如權利要求8所述的視頻標記裝置，其特征在于，還包括視頻錄制模塊，用于進行視頻錄制；

所述特征提取模塊用于在所述視頻錄制模塊進行視頻錄制過程中，提取視頻文件之音頻信號的聲音特征。