[發(fā)明專利]處理音頻流播放異常的方法、裝置、計算機裝置及計算機可讀存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201710832499.6
• 申請日: 2017-09-15
• 公開（公告）號: CN107566890B
• 公開（公告）日: 2020-05-22
• 發(fā)明（設(shè)計）人: 劉學(xué)文;車明賢
• 申請（專利權(quán)）人: 深圳國微技術(shù)有限公司
• 主分類號: H04N21/439
• 分類號: H04N21/439;H04N21/8547
• 代理公司: 深圳盛德大業(yè)知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 44333
• 代理人: 賈振勇

1.一種音頻流播放異常處理方法，其特征在于，所述方法包括:

獲取緩存中的音頻幀數(shù)據(jù)；

對所述音頻幀數(shù)據(jù)的解碼參數(shù)進(jìn)行解析，獲取相關(guān)音頻數(shù)據(jù)，并記錄第一幀音頻幀數(shù)據(jù)的時間戳，所述相關(guān)音頻數(shù)據(jù)包括所述音頻幀數(shù)據(jù)的音頻格式、音頻采樣率、音頻幀時長，所述音頻采樣率為每幀音頻對應(yīng)的音頻采樣數(shù)；

對解析后的音頻幀數(shù)據(jù)進(jìn)行解碼渲染，并讀取音頻采樣數(shù)；

根據(jù)所述音頻采樣數(shù)以及音頻采樣率之間的商，獲取音頻幀數(shù)；

根據(jù)所述音頻幀數(shù)與所述音頻幀時長的乘積，計算音頻渲染時間；

根據(jù)所述第一幀音頻幀數(shù)據(jù)的時間戳以及所述音頻渲染時間之間的和，獲取實際音頻渲染時間；

根據(jù)所述實際音頻渲染時間和音頻幀數(shù)據(jù)解碼過程中當(dāng)前最新進(jìn)入緩沖的音頻幀對應(yīng)的時間戳之間的差值，獲取實時碼流播放時間漂移；

根據(jù)所述實時碼流播放時間漂移，判斷所述音頻幀數(shù)據(jù)是否存在異常；

當(dāng)判斷結(jié)果為是時，啟動復(fù)位音頻處理操作。

2.如權(quán)利要求1所述的音頻流播放異常處理方法，其特征在于，所述判斷所述音頻幀數(shù)據(jù)是否存在異常，包括：

判斷所述實時碼流播放時間漂移是否超過第一預(yù)設(shè)時間閾值。

3.如權(quán)利要求1所述的音頻流播放異常處理方法，其特征在于，所述方法還包括：

計算多個連續(xù)音頻幀的解碼消耗平均時長；

計算所述音頻幀的解碼消耗平均時長與所述音頻幀時長之間的差值；

當(dāng)所述差值大于第二預(yù)設(shè)時間閾值時，啟動復(fù)位音頻處理操作。

4.如權(quán)利要求1所述的音頻流播放異常處理的方法，其特征在于，所述獲取緩存中的音頻幀數(shù)據(jù)，之前包括：

實時接收音頻流數(shù)據(jù)；

對所述音頻流數(shù)據(jù)進(jìn)行解復(fù)用，以獲取音頻幀數(shù)據(jù)；

對所述音頻幀數(shù)據(jù)進(jìn)行緩存與平滑處理。

5.一種音頻流播放異常處理裝置，其特征在于，所述裝置包括:

音頻幀數(shù)據(jù)獲取單元，用于獲取緩存中的音頻幀數(shù)據(jù)；

解析單元，用于對所述音頻幀數(shù)據(jù)的解碼參數(shù)進(jìn)行解析，獲取相關(guān)音頻數(shù)據(jù)，并記錄第一幀音頻幀數(shù)據(jù)的時間戳，所述相關(guān)音頻數(shù)據(jù)包括所述音頻幀數(shù)據(jù)的音頻格式、音頻采樣率、音頻幀時長，所述音頻采樣率為每幀音頻對應(yīng)的音頻采樣數(shù)；

解碼單元，用于對解析后的音頻幀數(shù)據(jù)進(jìn)行解碼渲染,并讀取音頻采樣數(shù)；

實際音頻渲染時間獲取單元，用于根據(jù)所述音頻采樣數(shù)以及音頻采樣率之間的商，獲取音頻幀數(shù)；以及根據(jù)所述音頻幀數(shù)與所述音頻幀時長的乘積，計算音頻渲染時間；以及根據(jù)所述第一幀音頻幀數(shù)據(jù)的時間戳以及所述音頻渲染時間之間的和，獲取實際音頻渲染時間；

實時碼流播放時間漂移獲取單元，用于根據(jù)所述實際音頻渲染時間和音頻幀數(shù)據(jù)解碼過程中當(dāng)前最新進(jìn)入緩沖的音頻幀對應(yīng)的時間戳之間的差值，獲取實時碼流播放時間漂移；

判斷單元，用于根據(jù)所述實時碼流播放時間漂移，判斷所述音頻幀數(shù)據(jù)是否存在異常；

第一復(fù)位啟動單元，用于當(dāng)判斷結(jié)果為是時，啟動復(fù)位音頻處理操作。

6.如權(quán)利要求5所述的音頻流播放異常處理裝置，其特征在于，所述實時碼流播放時間漂移獲取單元，包括：

時間戳獲取模塊，用于實時獲取解碼過程中最新進(jìn)入緩存的音頻幀的時間戳；

實時碼流播放時間漂移獲取模塊，用于根據(jù)所述實際音頻渲染時間以及所述時間戳之間的差值，獲取實時碼流播放時間漂移；

所述判斷單元，包括：

判斷所述實時碼流播放時間漂移是否超過第一預(yù)設(shè)時間閾值。

7.如權(quán)利要求5所述的音頻流播放異常處理裝置，其特征在于，所述裝置還包括：

平均時長計算模塊，用于計算多個連續(xù)音頻幀的解碼消耗平均時長；

計算單元，用于計算所述音頻幀的解碼消耗平均時長與所述音頻幀時長之間的差值；

第二復(fù)位啟動單元，用于當(dāng)所述差值大于第二預(yù)設(shè)時間閾值時，啟動復(fù)位音頻處理操作。