[發(fā)明專利]一種視頻與多聲道音頻同步播出的方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201410169084.1
• 申請(qǐng)日: 2014-04-25
• 公開（公告）號(hào): CN104079958B
• 公開（公告）日: 2017-07-11
• 發(fā)明（設(shè)計(jì)）人: 馬賽;張勤;胥文彬;葉龍
• 申請(qǐng)（專利權(quán)）人: 中國(guó)傳媒大學(xué)
• 主分類號(hào): H04N21/242
• 分類號(hào): H04N21/242;H04N21/43;H04N21/434
• 代理公司: 北京匯智英財(cái)專利代理事務(wù)所(普通合伙)11301
• 代理人: 鄭玉潔

技術(shù)領(lǐng)域

本發(fā)明涉及通信原理、數(shù)字信號(hào)處理技術(shù)領(lǐng)域，特別涉及一種視頻與多聲道音頻同步播出的方法。

背景技術(shù)

DMS(Dynamic Matrix Sound)動(dòng)聲系統(tǒng)所創(chuàng)造的動(dòng)態(tài)三維音視頻效果是三維視頻與多聲道環(huán)繞聲相結(jié)合的最新突破。在傳統(tǒng)的音視頻播出方式中，音視頻內(nèi)容在相同的設(shè)備中處理，因此音視頻播出的同步控制也是基于同一處理器(本地)實(shí)現(xiàn)的，但是音頻的聲道數(shù)量受到限制。DMS動(dòng)聲系統(tǒng)在音頻處理方面提出一個(gè)基于有限音源多聲道的聲場(chǎng)系統(tǒng)，其突破了音頻聲道數(shù)量的限制，因此，視頻內(nèi)容可以與任意聲道數(shù)量的音頻內(nèi)容同時(shí)播出。

圖1為現(xiàn)有技術(shù)中的DMS音視頻同步播放系統(tǒng)圖。如圖1所示，在DMS動(dòng)聲系統(tǒng)中，視頻和音頻由不同的PC機(jī)控制，視頻內(nèi)容直接輸出給顯示器或者屏幕，音頻內(nèi)容通過(guò)網(wǎng)絡(luò)傳輸給控制器，由控制器負(fù)責(zé)D/A(數(shù)字/模擬)變換，然后再輸出到功放及揚(yáng)聲器播出。由此可見(jiàn)，在DMS動(dòng)聲系統(tǒng)中，視頻與音頻內(nèi)容通過(guò)不同設(shè)備分別處理，相對(duì)視頻內(nèi)容來(lái)說(shuō)音頻內(nèi)容在播出前有一個(gè)傳輸?shù)倪^(guò)程，因此，在播放中需要解決不同的音視頻設(shè)備的同步問(wèn)題。

發(fā)明內(nèi)容

為此，本發(fā)明提出一種視頻與多聲道音頻同步播出的方法，可充分地消除由于現(xiàn)有技術(shù)的限制和缺陷導(dǎo)致的一個(gè)或多個(gè)問(wèn)題。

本發(fā)明另外的優(yōu)點(diǎn)、目的和特性，一部分將在下面的說(shuō)明書中得到闡明，而另一部分對(duì)于本領(lǐng)域的普通技術(shù)人員通過(guò)對(duì)下面的說(shuō)明的考察將是明顯的或從本發(fā)明專利的實(shí)施中學(xué)到。通過(guò)在文字的說(shuō)明書和權(quán)利要求書及附圖中特別地指出的結(jié)構(gòu)可實(shí)現(xiàn)和獲得本發(fā)明目的和優(yōu)點(diǎn)。

本發(fā)明提供了一種視頻與多聲道音頻同步播出的方法，所述方法用于DMS動(dòng)聲系統(tǒng)，所述DMS動(dòng)聲系統(tǒng)包括音頻服務(wù)器、視頻服務(wù)器和DMS控制器，其特征在于，所述方法具體包括以下步驟：

步驟(1)：通過(guò)所述音頻服務(wù)器生成多聲道音頻數(shù)據(jù)幀和多聲道同步錄制端全局時(shí)間信息碼流，其中，所述多聲道同步錄制端全局時(shí)間信息碼流包括為每個(gè)聲道的每一幀音頻數(shù)據(jù)標(biāo)記的音頻時(shí)間信息標(biāo)識(shí)t₁；

步驟(2)：通過(guò)所述視頻服務(wù)器生成視頻幀和視頻時(shí)間信息標(biāo)識(shí)t₂，所述視頻時(shí)間信息標(biāo)識(shí)t₂與所述音頻時(shí)間信息標(biāo)識(shí)t₁具有相同的時(shí)間基準(zhǔn)；

步驟(3)：對(duì)所述視頻時(shí)間信息標(biāo)識(shí)t₂進(jìn)行編碼，并將編碼后的信號(hào)進(jìn)行OFDM調(diào)制，然后將調(diào)制后的信號(hào)作為音視頻同步伴音信號(hào)插入視頻幀中；

步驟(4)：將所述伴音信號(hào)和視頻幀一起傳送到視頻顯示終端；

步驟(5)：通過(guò)網(wǎng)絡(luò)將生成的所述多聲道音頻數(shù)據(jù)幀和多聲道同步錄制端全局時(shí)間信息碼流傳送到DMS控制器；

步驟(6)：DMS控制器對(duì)接收到的所述多聲道音頻數(shù)據(jù)幀和多聲道同步錄制端全局時(shí)間信息碼流進(jìn)行解析，恢復(fù)出音頻時(shí)間信息標(biāo)識(shí)t₁；

步驟(7)：DMS控制器采集在視頻播出終端播出的視頻幀中插入的音視頻同步伴音信號(hào)，并通過(guò)對(duì)采集到的音視頻同步伴音信號(hào)先后進(jìn)行OFDM解調(diào)和糾錯(cuò)碼控制后，恢復(fù)出視頻時(shí)間信息標(biāo)識(shí)t₂；

步驟(8)：將恢復(fù)出的音頻時(shí)間信息標(biāo)識(shí)t₁和視頻時(shí)間信息標(biāo)識(shí)t₂進(jìn)行比較，獲得音視頻同步控制調(diào)整參數(shù)Δt；

步驟(9)，將所述音視頻同步控制調(diào)整參數(shù)Δt傳送給視頻播出服務(wù)器，所述視頻播出服務(wù)器根據(jù)所述音視頻同步控制調(diào)整參數(shù)Δt來(lái)調(diào)整視頻內(nèi)容的播放進(jìn)度，實(shí)現(xiàn)音視頻的同步播出。

優(yōu)選的，所述步驟(1)具體包括：所述音頻服務(wù)器包括多聲道同步錄制主控制器、系統(tǒng)參考時(shí)鐘分配單元和多個(gè)多聲道同步錄制從控制器，其中，同步時(shí)鐘控制采用主從方式，多聲道同步錄制主控制器產(chǎn)生并發(fā)送同步基準(zhǔn)信號(hào)和同步時(shí)鐘信號(hào)，通過(guò)系統(tǒng)參考時(shí)鐘分配單元分配至多個(gè)多聲道同步錄制從控制器；多聲道同步錄制主控制器、多個(gè)多聲道同步錄制從控制器鎖定相同的同步時(shí)鐘信號(hào)，通過(guò)同步基準(zhǔn)信號(hào)對(duì)音頻流的延時(shí)進(jìn)行調(diào)整，形成多聲道同步錄制端全局時(shí)間信息碼流，所述多聲道同步錄制端全局時(shí)間信息碼流包括為每個(gè)聲道的每一幀音頻數(shù)據(jù)標(biāo)記的音頻時(shí)間信息標(biāo)識(shí)t₁。

優(yōu)選的，所述音視頻同步控制調(diào)整參數(shù)Δt為t₁和t₂之間的差值。

優(yōu)選的，所述DMS控制器循環(huán)的獲得所述音視頻同步控制調(diào)整參數(shù)Δt，當(dāng)Δt大于預(yù)設(shè)的閾值時(shí)，向視頻服務(wù)器回傳所述音視頻同步控制調(diào)整參數(shù)Δt。