[發明專利]一種基于互聯網電視業務的音視頻異態檢測方法及系統

有效

• 申請號: 201911063131.3
• 申請日: 2019-10-31
• 公開（公告）號: CN110677725B
• 公開（公告）日: 2022-04-22
• 發明（設計）人: 林桂云
• 申請（專利權）人: 飛思達技術(北京)有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/439
• 代理公司: 北京中企鴻陽知識產權代理事務所(普通合伙) 11487
• 代理人: 龐曉辰

1.一種基于互聯網電視業務的音視頻異態檢測方法，其特征在于，包括以下步驟：

S1、根據設置的取樣參數采集互聯網電視業務的歷史視頻流數據；

S2、對歷史視頻流數據進行解碼、清洗和轉換，并對轉換后的數據進行異態現象分類；所述步驟S2的具體操作如下：

S21、獲取歷史視頻流數據中的視頻數據和音頻數據，解析視頻數據的I幀、P幀和B幀數據，解析音頻數據的波形、左右聲道數據相位；

S22、對視頻解碼數據和音頻解碼數據進行重新審查和校驗；

S23、將視頻解碼數據和音頻解碼數據轉換為結構化數據；

S24、根據歷史視頻流數據異態信息對結構化的視頻解碼數據和音頻解碼數據進行異態現象分類；所述異態現象包括視頻異態現象和音頻異態現象，所述視頻異態現象包括靜幀現象、黑場現象、單色場現象、彩場現象和馬賽克現象，所述音頻異態現象包括靜音現象、左聲道音量過高現象、左聲道音量過低現象、右聲道音量過高現象和右聲道音量過低現象；

S3、依次提取每個異態現象類別中的數據的特征，得到異態特征庫；

S31、選取視頻異態現象下的視頻解碼數據，利用顏色直方圖分析法計算每個視頻幀數據的顏色直方圖；

S32、根據視頻幀數據的顏色直方圖和視頻解碼數據的時間戳設置視頻異態現象對應的分類閾值；其中，判斷馬賽克現象之前需要將視頻幀切割成多個大小相同的方塊，分別計算每個方塊的顏色直方圖，馬賽克現象的分類閾值指視頻幀切割后的方塊中出現單色場現象，且出現單色場現象的方塊占總方塊數的30％及以上；

S33、選取音頻異態現象下的音頻解碼數據，基于短時傅里葉變換函數計算每個音頻幀的波形幅值，公式如下：

其中，X_k表示第k幀音頻信號的波形幅值，ω(n)表示加窗截斷后的信號，x_k(n)表示第k幀音頻信號，N為音頻信號幀長度，n＝1,2,…,N，j為虛數單位，設音頻解碼數據共有M個幀，k＝1,2,…,M；

S34、根據音頻幀的波形幅值設置音頻異態現象對應的分類閾值；靜音現象對應的分類閾值為X_k＝0；左/右聲道音量過高現象對應的分類閾值為單聲道X_k≥90db、持續時間超過10秒，另一聲道同一時間30db≤X_k≤70db；左/右聲道音量過低現象對應的分類閾值為單聲道X_k≤15db、持續時間超過10秒，另一聲道同一時間30db≤X_k≤70db；

S35、根據S32和S34得到的分類閾值生成異態特征庫；

S4、獲取互聯網電視業務的實時視頻流數據，并對實時視頻流數據進行特征提取；

S5、利用異態特征庫判斷實時視頻流數據的異態現象，并產生異態告警；根據異態特征庫構建異態現象訓練模型，給異態現象訓練模型輸入實時視頻流數據的特征，異態現象訓練模型輸出該實時視頻流數據對應的異態現象，當規定時間內異態現象累計次數超過門限值，產生異態告警，所述異態告警包括該實時視頻流數據的視頻源地址、數據上報地址、異態現象、異態現象出現的時間戳、異態現象累計次數。

2.根據權利要求1所述的一種基于互聯網電視業務的音視頻異態檢測方法，其特征在于，所述步驟S1的具體操作如下：

S11、自定義的設置視頻流數據取樣的取樣參數，所述取樣參數包括視頻源地址、取樣頻率和數據上報地址；

S12、根據取樣參數利用程序進行視頻流拉流、數據抓包和視頻指標分析，采集歷史視頻流數據。

3.根據權利要求1所述的一種基于互聯網電視業務的音視頻異態檢測方法，其特征在于，所述對實時視頻流數據進行特征提取，具體指提取實時視頻流數據中每個視頻幀的顏色直方圖和每個音頻幀的波形幅值。