[發(fā)明專利]一種音視頻同步和同步播放的方法及設(shè)備

在審

• 申請?zhí)枺?/td>: 201610091514.1
• 申請日: 2016-02-18
• 公開（公告）號: CN105744334A
• 公開（公告）日: 2016-07-06
• 發(fā)明（設(shè)計）人: 楊夫星
• 申請（專利權(quán)）人: 海信集團有限公司
• 主分類號: H04N21/43
• 分類號: H04N21/43;H04N21/8547
• 代理公司: 北京同達信恒知識產(chǎn)權(quán)代理有限公司 11291
• 代理人: 張愷寧

1.一種音視頻同步的方法，其特征在于，該方法包括：

針對單位時間內(nèi)采集到的音視頻數(shù)據(jù)，將所述音視頻數(shù)據(jù)中的視頻數(shù)據(jù)分為N個視頻數(shù)據(jù)包，并分別對N個視頻數(shù)據(jù)包進行標(biāo)記；以及將所述音視頻數(shù)據(jù)中的音頻數(shù)據(jù)分為M個音頻數(shù)據(jù)包，并分別對M個音頻數(shù)據(jù)包進行標(biāo)記；其中，M、N均為大于1的整數(shù)；

將標(biāo)記后的視頻數(shù)據(jù)和標(biāo)記后的音頻數(shù)據(jù)通過不同的發(fā)送通道同時發(fā)送，以使接收端根據(jù)視頻標(biāo)記信息，在確定收到的單位時間內(nèi)的所述視頻數(shù)據(jù)包數(shù)量不等于N時，調(diào)整接收到的每個視頻數(shù)據(jù)包的播放時長，以及根據(jù)音頻標(biāo)記信息，在確定收到的單位時間內(nèi)的音頻數(shù)據(jù)包不等于M時，調(diào)整所述音頻數(shù)據(jù)中的音頻數(shù)據(jù)包個數(shù)。

2.如權(quán)利要求1所述的方法，其特征在于，所述將音視頻數(shù)據(jù)中的視頻數(shù)據(jù)分為N個視頻數(shù)據(jù)包，以及將所述音視頻數(shù)據(jù)中的音頻數(shù)據(jù)分為M個音頻數(shù)據(jù)包之前，還包括：

在滿足條件一時，將所述單位時間內(nèi)采集到的音視頻數(shù)據(jù)中的視頻數(shù)據(jù)添加到視頻發(fā)送緩沖區(qū)中，以及將所述音視頻數(shù)據(jù)中的音頻數(shù)據(jù)添加到音頻發(fā)送緩沖區(qū)中；

在不滿足條件一時，丟棄所述單位時間內(nèi)采集到的音視頻數(shù)據(jù)；

所述條件一為：視頻發(fā)送緩沖區(qū)中的待發(fā)送視頻數(shù)據(jù)量不大于第一閾值，并且所述音頻發(fā)送緩沖區(qū)中的待發(fā)送音頻數(shù)據(jù)量不大于第二閾值。

3.如權(quán)利要求1所述的方法，其特征在于，所述分別對N個視頻數(shù)據(jù)包進行標(biāo)記，包括：

根據(jù)時間順序，將N個視頻數(shù)據(jù)包分別添加視頻頭標(biāo)記，并且每個視頻數(shù)據(jù)包對應(yīng)一個視頻頭標(biāo)記；其中，第一個視頻數(shù)據(jù)包的視頻頭標(biāo)記與其它視頻數(shù)據(jù)包的視頻頭標(biāo)記不同；

所述分別對M個音頻數(shù)據(jù)包進行標(biāo)記，包括：

將M個音頻數(shù)據(jù)包添加相同或不同的音頻頭標(biāo)記，其中每個音頻數(shù)據(jù)包對應(yīng)一個音頻頭標(biāo)記。

4.一種音視頻同步播放的方法，其特征在于，包括：

接收來自發(fā)送端的視頻數(shù)據(jù)和音頻數(shù)據(jù)，其中視頻數(shù)據(jù)和音頻數(shù)據(jù)是發(fā)送端將所述同一單位時間采集到的視頻數(shù)據(jù)和音頻數(shù)據(jù)分別分為N個視頻數(shù)據(jù)包和M個音頻數(shù)據(jù)包，并分別對N個視頻數(shù)據(jù)包和M個音頻數(shù)據(jù)包進行標(biāo)記后發(fā)送的；其中，M、N均為大于1的整數(shù)；

根據(jù)視頻數(shù)據(jù)的標(biāo)記信息和音頻數(shù)據(jù)的標(biāo)記信息，確定位于同一單位時間的視頻數(shù)據(jù)和音頻數(shù)據(jù)，并確定所述視頻數(shù)據(jù)中的視頻數(shù)據(jù)包個數(shù)Vn和所述音頻數(shù)據(jù)中的音頻數(shù)據(jù)包個數(shù)An；

若所述視頻數(shù)據(jù)中的視頻數(shù)據(jù)包個數(shù)Vn不等于N，則調(diào)整所述每個視頻數(shù)據(jù)包的播放時長，并根據(jù)所述調(diào)整后的播放時長，播放所述視頻數(shù)據(jù)；若所述音頻數(shù)據(jù)中的音頻數(shù)據(jù)包個數(shù)An不等于M，則調(diào)整所述音頻數(shù)據(jù)中的音頻數(shù)據(jù)包個數(shù)，并播放調(diào)整后的音頻數(shù)據(jù)。

5.如權(quán)利要求4所述的方法，其特征在于，所述根據(jù)視頻數(shù)據(jù)的標(biāo)記信息和音頻數(shù)據(jù)的標(biāo)記信息，確定位于同一單位時間的視頻數(shù)據(jù)和音頻數(shù)據(jù)，包括：

根據(jù)時間順序，將所述視頻數(shù)據(jù)和所述音頻數(shù)據(jù)存儲于接收緩沖區(qū)中；

根據(jù)所述視頻標(biāo)記信息，獲取所述接收緩沖區(qū)中有特殊視頻頭標(biāo)記的相鄰兩個視頻數(shù)據(jù)之間的視頻數(shù)據(jù)包，以及位于前面的有特殊視頻頭標(biāo)記的視頻數(shù)據(jù)包，并存儲于視頻處理緩沖區(qū)，作為一個單位時間的視頻數(shù)據(jù)；根據(jù)所述音頻標(biāo)記信息，獲取有特殊視頻頭標(biāo)記的相鄰兩個視頻數(shù)據(jù)之間的音頻數(shù)據(jù)包，并存儲于音頻處理緩沖區(qū)，作為一個單位時間的音頻數(shù)據(jù)；并且將所述一個單位時間的視頻數(shù)據(jù)和所述一個單位時間的音頻數(shù)據(jù)作為同一單位時間的視頻數(shù)據(jù)和音頻數(shù)據(jù)。

6.如權(quán)利要求4所述的方法，其特征在于，所述調(diào)整每個視頻數(shù)據(jù)包的播放時長，包括：

將單位時間除以視頻數(shù)據(jù)中的視頻數(shù)據(jù)包個數(shù)Vn，得到的商值作為每個視頻數(shù)據(jù)包的播放時長；

所述若音頻數(shù)據(jù)中的音頻數(shù)據(jù)包個數(shù)An不等于M，則調(diào)整所述音頻數(shù)據(jù)中的音頻數(shù)據(jù)包個數(shù)，包括：

若An＞M，則丟棄所述音頻數(shù)據(jù)中的An-M個音頻數(shù)據(jù)包；

若An＜M，則從備選音頻數(shù)據(jù)包中選取M-An個音頻數(shù)據(jù)包，插入所述音頻數(shù)據(jù)中。