[發(fā)明專利]音視頻同步播放方法和裝置

有效

• 申請(qǐng)?zhí)枺?/td>: 201710648648.3
• 申請(qǐng)日: 2017-08-01
• 公開（公告）號(hào): CN109327724B
• 公開（公告）日: 2021-08-31
• 發(fā)明（設(shè)計(jì)）人: 李敬來
• 申請(qǐng)（專利權(quán)）人: 成都鼎橋通信技術(shù)有限公司
• 主分類號(hào): H04N21/43
• 分類號(hào): H04N21/43;H04N21/439;H04N21/44
• 代理公司: 北京同立鈞成知識(shí)產(chǎn)權(quán)代理有限公司 11205
• 代理人: 楊澤;劉芳

本發(fā)明提供了一種音視頻同步播放方法和裝置，其中，音視頻同步播放方法包括獲取音視頻數(shù)據(jù)發(fā)送端取消靜音的t₀時(shí)刻，其中靜音為音視頻數(shù)據(jù)發(fā)送端停止發(fā)送音頻數(shù)據(jù)幀；根據(jù)t₀時(shí)刻時(shí)，視頻緩沖區(qū)中已緩存的視頻數(shù)據(jù)幀對(duì)應(yīng)的播放時(shí)長，確定t₀時(shí)刻接收到的音頻數(shù)據(jù)幀的延時(shí)播放時(shí)間；同步播放視頻數(shù)據(jù)幀和音頻數(shù)據(jù)幀。本發(fā)明提供的音視頻同步播放方法中音視頻數(shù)據(jù)發(fā)送端取消靜音，并且音視頻數(shù)據(jù)播放端接收到音視頻數(shù)據(jù)發(fā)送端發(fā)送的音頻數(shù)據(jù)幀后，控制接收到的音頻數(shù)據(jù)幀延時(shí)播放，從而，達(dá)到音視頻同步播放的效果。解決了現(xiàn)有技術(shù)中音視頻數(shù)據(jù)發(fā)送端出現(xiàn)發(fā)送靜音的狀況時(shí)，音視頻數(shù)據(jù)播放端出現(xiàn)的音視頻同步效果不佳的問題。

技術(shù)領(lǐng)域

本發(fā)明實(shí)施例涉及音視頻數(shù)據(jù)處理技術(shù)領(lǐng)域，尤其涉及一種音視頻同步播放方法和裝置。

背景技術(shù)

音視頻播放過程中，例如視頻聊天或視頻會(huì)議等，音頻與視頻的同步播放可以提高用戶的音視頻體驗(yàn)。

現(xiàn)有技術(shù)中，音視頻數(shù)據(jù)發(fā)送端在靜音情況下，播放器接收音頻數(shù)據(jù)包和視頻數(shù)據(jù)包并獲取音頻數(shù)據(jù)幀和視頻數(shù)據(jù)幀后，音頻數(shù)據(jù)幀和視頻數(shù)據(jù)幀分別以某幀數(shù)比例被緩存并解密，然后，以上述比例緩存后的音頻數(shù)據(jù)幀和視頻數(shù)據(jù)幀被播端，進(jìn)而實(shí)現(xiàn)音頻數(shù)據(jù)幀與視頻數(shù)據(jù)幀的同步播放。例如，每個(gè)音頻數(shù)據(jù)幀播放的時(shí)長是20毫秒，每個(gè)視頻數(shù)據(jù)幀的播放時(shí)長是40毫秒，則在音視頻數(shù)據(jù)發(fā)送端緩存播放時(shí)長為1秒的音頻數(shù)據(jù)幀(50幀)的同時(shí)，還緩存播放時(shí)長為1秒的視頻數(shù)據(jù)幀(25幀)，音頻數(shù)據(jù)幀與對(duì)應(yīng)的視頻數(shù)據(jù)幀以比例為2:1的幀數(shù)比被緩存并以同樣的幀數(shù)比被發(fā)送至音視頻數(shù)據(jù)播放端，進(jìn)而被音視頻數(shù)據(jù)播放端以同樣的幀數(shù)比播放。

然而，利用現(xiàn)有技術(shù)實(shí)現(xiàn)音視頻同步的效果不佳。

發(fā)明內(nèi)容

本發(fā)明實(shí)施例提供了一種音視頻同步播放方法和裝置，以解決利用現(xiàn)有技術(shù)實(shí)現(xiàn)利用現(xiàn)有技術(shù)實(shí)現(xiàn)音視頻同步的效果不佳的問題。

本發(fā)明實(shí)施例的執(zhí)行主體為音視頻數(shù)據(jù)播放端，本發(fā)明實(shí)施例一方提供一種音視頻同步播放方法，包括：

獲取音視頻數(shù)據(jù)發(fā)送端取消靜音的t₀時(shí)刻，其中上述靜音為上述音視頻數(shù)據(jù)發(fā)送端停止發(fā)送音頻數(shù)據(jù)幀；

根據(jù)上述t₀時(shí)刻時(shí)，視頻緩沖區(qū)中已緩存的視頻數(shù)據(jù)幀對(duì)應(yīng)的播放時(shí)長，確定上述t₀時(shí)刻接收到的上述音頻數(shù)據(jù)幀的延時(shí)播放時(shí)間；

同步播放上述視頻數(shù)據(jù)幀和上述音頻數(shù)據(jù)幀。

可選的，上述根據(jù)上述t₀時(shí)刻時(shí)，視頻緩沖區(qū)中已緩存的視頻數(shù)據(jù)幀對(duì)應(yīng)的播放時(shí)長，確定上述t₀時(shí)刻接收到的上述音頻數(shù)據(jù)幀的延時(shí)播放時(shí)間，包括：

確定上述t₀時(shí)刻時(shí)上述視頻緩沖區(qū)中已緩存的視頻數(shù)據(jù)幀對(duì)應(yīng)的時(shí)長為上述t₀時(shí)刻接收到的上述音頻數(shù)據(jù)幀的延時(shí)播放時(shí)間。

可選的，上述根據(jù)上述t₀時(shí)刻時(shí)，視頻緩沖區(qū)中已緩存的視頻數(shù)據(jù)幀對(duì)應(yīng)的播放時(shí)長，確定上述t₀時(shí)刻接收到的上述音頻數(shù)據(jù)幀的延時(shí)播放時(shí)間，包括：

獲取上述音頻數(shù)據(jù)幀的傳送時(shí)間；

確定上述t₀時(shí)刻時(shí)上述視頻緩沖區(qū)中已緩存的視頻數(shù)據(jù)幀對(duì)應(yīng)的時(shí)長和上述音頻數(shù)據(jù)幀的傳送時(shí)間之和，為上述t₀時(shí)刻接收到的上述音頻數(shù)據(jù)幀的延時(shí)播放時(shí)間。

可選的，上述獲取音視頻數(shù)據(jù)發(fā)送端取消靜音的t₀時(shí)刻，包括：

上述t₀時(shí)刻之前，接收不到上述音頻數(shù)據(jù)幀；上述t₀時(shí)刻，開始接收到上述音頻數(shù)據(jù)幀。