[發明專利]一種流媒體音視頻同步方法及終端設備、控制裝置、介質

在審

• 申請號: 202211043840.7
• 申請日: 2022-08-26
• 公開（公告）號: CN115484483A
• 公開（公告）日: 2022-12-16
• 發明（設計）人: 陳文彬;劉浩勇
• 申請（專利權）人: 廣東萬通信息科技有限公司
• 主分類號: H04N21/43
• 分類號: H04N21/43;H04N21/433
• 代理公司: 廣州嘉權專利商標事務所有限公司 44205
• 代理人: 何嘉杰

本發明公開了一種流媒體音視頻同步方法及終端設備、控制裝置、介質，包括以下步驟：發送需求播放時長的音頻獲取請求以及視頻獲取請求；獲取音頻緩存數據以及視頻緩存數據；計算音頻緩存播放時長與需求播放時長的差值以得出音頻延時時長，若音頻延時時長大于同步播放延時閾值，調節音頻緩存數據的播放速度以使得音頻延時時長小于同步播放延時閾值；計算視頻緩存播放時長與需求播放時長的差值以得出視頻延時時長，若視頻延時時長大于同步播放延時閾值，調節視頻緩存數據的播放速度以使得視頻延時時長小于同步播放延時閾值，本設計處理高效、簡捷，能夠較好地實現音視頻數據同步播放。

技術領域

本發明涉及計算機技術領域，特別涉及一種流媒體音視頻同步方法及終端設備、控制裝置、介質。

背景技術

流媒體指以流方式在網絡中傳送音頻數據、視頻數據等多媒體文件的形式，流媒體的典型特征是把連續的音頻數據和視頻數據壓縮后放到網絡服務器，在客戶端發出請求后從網絡服務器中獲取音頻數據和視頻數據，但是不必等待音頻數據和視頻數據完全下載完畢，而是緩存一部分后即可進行播放。

但是當出現網絡波動或者其他異常情況時，視頻和音頻的播放有可能存在卡頓，甚至會因為造成音頻和視頻的每一幀無法對應上，這種誤差逐步累積，以至于嚴重影響用戶的使用體驗。因此，在播放的過程中，需要將緩存的音頻數據和視頻數據同步，以往的做法一般是將音頻數據按視頻數據的時間幀來處理播放，或者將視頻數據按音頻數據的采樣率來處理播放，但是由于在流媒體上，不管是音頻數據還是視頻數據，都只是緩存的部分數據，以上方式比較復雜，處理量較大，給處理器帶來較大處理壓力。

發明內容

本發明旨在至少解決現有技術中存在的技術問題之一。為此，本發明提出一種流媒體音視頻同步方法及終端設備、控制裝置、介質，處理高效，能夠較好地實現音視頻數據同步播放。

根據本發明的第一方面實施例的一種流媒體音視頻同步方法，包括以下步驟：發送需求播放時長均為第一時間值的音頻獲取請求以及視頻獲取請求；獲取音頻緩存數據以及視頻緩存數據，其中，所述音頻緩存數據的音頻緩存播放時長為第二時間值，所述視頻緩存數據的視頻緩存播放時長為第三時間值；計算所述音頻緩存播放時長與所述需求播放時長的差值以得出音頻延時時長，若音頻延時時長大于同步播放延時閾值，調節所述音頻緩存數據的播放速度以使得所述音頻延時時長小于同步播放延時閾值；計算所述視頻緩存播放時長與所述需求播放時長的差值以得出視頻延時時長，若視頻延時時長大于同步播放延時閾值，調節所述視頻緩存數據的播放速度以使得視頻延時時長小于同步播放延時閾值。

根據本發明實施例的一種流媒體音視頻同步方法，至少具有如下有益效果：

本發明流媒體音視頻同步方法，利用本地客戶端時鐘生成并發送需求播放時長均為第一時間值的音頻獲取請求以及視頻獲取請求，此時網絡服務器會響應本地客戶端的請求，向本地客戶端發送傳輸音頻緩存數據以及視頻緩存數據，但是因為網絡波動或者其他情況，音頻緩存數據以及視頻緩存數據的緩存播放時長不一定等于需求播放時長，由于利用同一個需求播放時長來分別對音頻和視頻請求獲取，音頻緩存數據以及視頻緩存數據兩者的時長偏差不會過大，此時再利用同一個同步播放延時閾值來分別對音頻延時時長和視頻延時時長來進行判斷，若大于同步播放延時閾值，則相應地對音頻緩存數據或者視頻緩存數據的播放速度進行調整，最終使得音頻延時時長和視頻延時時長小于同步播放延時閾值，此時音頻緩存數據和視頻緩存數據的播放時長雖然仍然存在偏差，但是經過上述處理，偏差已經減少至較小值，能夠滿足播放要求，實現基本同步，本設計處理高效、簡捷，能夠較好地實現音視頻數據同步播放。