[發明專利]基于視覺感知的視頻幀率檢測方法及裝置

在審

• 申請號: 202111088246.5
• 申請日: 2021-09-16
• 公開（公告）號: CN115834952A
• 公開（公告）日: 2023-03-21
• 發明（設計）人: 萬明陽;顧澤豪;關夢龍;馬國俊;邢斌斌
• 申請（專利權）人: 北京字跳網絡技術有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N21/442;H04N21/8547;H04N9/70
• 代理公司: 北京風雅頌專利代理有限公司 11403
• 代理人: 陳莉

1.一種基于視覺感知的視頻幀率檢測方法，其特征在于，包括：

提取視頻每一幀播放的時間戳，根據所述時間戳確定視頻的相鄰幀；

將所述視頻每一幀的RGB三通道轉換為灰度單通道，并計算所述灰度單通道的灰度像素點值；

根據所述灰度像素點值不同的數量占比計算所述視頻的相鄰幀變化率；

根據所述灰度像素點值的變化差之和占比計算所述視頻的相鄰幀內容變化率；

檢測所述視頻的相鄰幀變化率與第一卡頓閾值的關系；

檢測所述視頻的相鄰幀內容變化率與第二卡頓閾值的關系；以及

在所述相鄰幀變化率大于等于所述第一卡頓閾值，同時所述相鄰幀內容變化率大于等于第二卡頓閾值時，判定相鄰視頻幀不卡頓。

2.根據權利要求1所述的方法，其特征在于，所述視頻每一幀播放的時間戳為視頻幀解碼后每一幀顯示的時間點，用戶計算視頻幀的播放時間，根據每一幀的時間點和播放時間確定所述視頻的相鄰幀。

3.根據權利要求1所述的方法，其特征在于，所述將所述視頻每一幀的RGB三通道轉換為灰度單通道，并計算所述灰度單通道的灰度像素點值，轉換公式為：

GRAY＝R*0.299+G*0.587+B*0.114；

其中，GRAY為灰度單通道的灰度像素點值，R為紅色通道分量，G為綠色通道分量，B為藍色通道分量。

4.根據權利要求1所述的方法，其特征在于，所述相鄰幀變化率為視頻相鄰幀對應位灰度像素點值不相等的個數占總像素點個數的比例，具體計算公式如下：

其中，H和W表示視頻幀的高和寬，p_ij和p’_ij分別表示相鄰幀圖像坐標(i,j)的灰度像素點值，相鄰幀變化率范圍在0-1之間。

5.根據權利要求1所述的方法，其特征在于，所述相鄰幀內容變化率為視頻相鄰幀對應位灰度像素點值的變化差之和與對應位灰度像素點值不相等的個數的比例，具體計算公式如下：

其中，H和W表示視頻幀的高和寬，p_ij和p’_ij分別表示相鄰幀圖像坐標(i,j)的灰度像素點值，其中分母中乘以256是因為灰度圖像素值共有256個，相鄰幀內容變化率范圍在0-1之間。

6.根據權利要求1所述的方法，其特征在于，所述第一卡頓閾值設置為0.01至0.1，所述第二卡頓閾值設置為0.1至0.5。

7.根據權利要求1所述的方法，其特征在于，所述方法還包括：

所述視頻的相鄰幀變化率小于第一卡頓閾值，和/或，所述視頻的相鄰幀內容變化率小于第二卡頓閾值時，判定所述相鄰視頻幀為卡頓；

判定所述相鄰視頻幀為卡頓時，舍棄該視頻幀。

8.根據權利要求1所述的方法，其特征在于，所述方法還包括：

計算所述視頻的視頻感知幀率；

所述視頻感知幀率為視頻不卡頓幀個數除以不卡頓最后一幀播放時間。

9.根據權利要求8所述的方法，其特征在于，所述方法還包括：

采用錄制計時的方式錄制視頻，對比所述錄制視頻的感知幀率和實際幀率，對錄制視頻進行感知幀率的驗證。