[發明專利]音頻視頻同步處理方法及裝置

有效

• 申請號: 201110384994.8
• 申請日: 2011-11-28
• 公開（公告）號: CN102404573A
• 公開（公告）日: 2012-04-04
• 發明（設計）人: 鄒鵬
• 申請（專利權）人: 深圳市萬興軟件有限公司
• 主分類號: H04N7/26
• 分類號: H04N7/26;H04N7/54
• 代理公司: 深圳市順天達專利商標代理有限公司 44217
• 代理人: 郭偉剛

1.一種音頻視頻同步處理方法，包括：

接收步驟，用于接收音頻樣本和視頻樣本；

編碼步驟，用于分別對接收的所述音頻樣本和視頻樣本進行編碼以形成編碼后音頻樣本和編碼后視頻樣本，并輸出包括所述編碼后音頻樣本和編碼后視頻樣本的編碼后音頻視頻隊列；以及

文件合成步驟，用于將所述編碼后音頻樣本和編碼后視頻樣本合成文件以輸出；

其特征在于，所述編碼步驟與所述文件合成步驟之間還包括編碼后交織步驟，用于基于所述編碼后視頻樣本的視頻幀率對所述編碼后音頻樣本和編碼后視頻樣本進行交織以形成編碼后交織隊列供文件合成。

2.根據權利要求1所述的音頻視頻同步處理方法，其特征在于，所述編碼后交織步驟進一步包括：

分別采集所述編碼后音頻視頻隊列中的每一幀所述編碼后音頻樣本和每一幀編碼后視頻樣本消耗的字節數，以分別獲得每一幀所述編碼后音頻樣本的持續時長和每一幀所述編碼后視頻樣本的持續時長；以及

基于每一幀所述編碼后音頻樣本的持續時長和每一幀所述編碼后視頻樣本的持續時長對所述編碼后音頻視頻隊列中的所述編碼后音頻樣本和編碼后視頻樣本進行交織以獲得編碼后交織隊列，其中所述編碼后交織隊列中任一幀編碼后視頻樣本的持續時長與其對應的一幀編碼后音頻樣本的持續時長之差小于或等于預設閾值。

3.根據權利要求2所述的音頻視頻同步處理方法，其特征在于，所述編碼后交織步驟進一步包括：

當所述編碼后音頻視頻隊列中的任一幀編碼后視頻樣本的持續時長與k幀編碼后音頻樣本的持續時長之和的差小于或等于所述預設閾值時，其中k為大于或等于1的自然數，則編碼后交織隊列中該幀編碼后視頻樣本對應的一幀編碼后音頻樣本由所述編碼后音頻視頻隊列中該k幀編碼后音頻樣本組成。

4.根據權利要求3所述的音頻視頻同步處理方法，其特征在于，所述預設閾值為0.01秒。

5.根據權利要求3所述的音頻視頻同步處理方法，其特征在于，所述編碼后交織隊列中任一幀編碼后視頻樣本的持續時長與其對應的一幀編碼后音頻樣本的持續時長相等。

6.根據權利要求1-5任一項所述的音頻視頻同步處理方法，其特征在于，所述接收步驟與所述編碼步驟之間還包括編碼前交織步驟，用于基于接收的所述視頻樣本的視頻幀率對接收的所述音頻樣本和視頻樣本進行交織以形成編碼前交織隊列。

7.根據權利要求6所述的音頻視頻同步處理方法，其特征在于，在所述編碼前交織步驟中，按下列公式：

nBitA＝nChannel×nSampleRate×nBit*(1/nFramerate)/8

計算所述編碼前交織隊列中任一幀視頻樣本對應的一幀音頻樣本內包含的字節數nBitA，其中，nChannel為所述音頻樣本的聲道個數，nSamplerate為所述音頻樣本的采樣率，nBit為每個所述音頻樣本的量化比特數，nFramerate為所述視頻樣本的視頻幀率。

8.一種音頻視頻同步處理裝置，包括：

接收裝置，用于接收音頻樣本和視頻樣本；

編碼裝置，用于分別對接收的所述音頻樣本和視頻樣本進行編碼以形成編碼后音頻樣本和編碼后視頻樣本，并輸出包括所述編碼后音頻樣本和編碼后視頻樣本的編碼后音頻視頻隊列；以及

文件合成裝置，用于將所述編碼后音頻樣本和編碼后視頻樣本合成文件以輸出；

其特征在于，所述音頻視頻同步處理裝置還包括編碼后交織裝置，用于基于所述編碼后視頻樣本的視頻幀率對所述編碼后音頻樣本和編碼后視頻樣本進行交織以形成編碼后交織隊列供文件合成。

9.根據權利要求8所述的音頻視頻同步處理裝置，其特征在于，所述編碼后交織裝置進一步用于：

分別采集所述編碼后音頻視頻隊列中的每一幀所述編碼后音頻樣本和每一幀編碼后視頻樣本消耗的字節數，以分別獲得每一幀所述編碼后音頻樣本的持續時長和每一幀所述編碼后視頻樣本的持續時長；以及

基于每一幀所述編碼后音頻樣本的持續時長和每一幀所述編碼后視頻樣本的持續時長對所述編碼后音頻視頻隊列中的所述編碼后音頻樣本和編碼后視頻樣本進行交織以獲得編碼后交織隊列，其中所述編碼后交織隊列中任一幀編碼后視頻樣本的持續時長與其對應的一幀編碼后音頻樣本的持續時長之差小于或等于預設閾值。

10.根據權利要求9所述的音頻視頻同步處理裝置，其特征在于，所述編碼后交織裝置進一步用于：

當所述編碼后音頻視頻隊列中的任一幀編碼后視頻樣本的持續時長與k幀編碼后音頻樣本的持續時長之和的差小于或等于所述預設閾值時，其中k為大于或等于1的自然數，則編碼后交織隊列中該幀編碼后視頻樣本對應的一幀編碼后音頻樣本由所述編碼后音頻視頻隊列中該k幀編碼后音頻樣本組成。