[發明專利]一種多媒體數據流同步控制的方法及裝置

無效

• 申請號: 200710099123.5
• 申請日: 2007-05-11
• 公開（公告）號: CN101137066A
• 公開（公告）日: 2008-03-05
• 發明（設計）人: 吳安軍
• 申請（專利權）人: 中興通訊股份有限公司
• 主分類號: H04N7/52
• 分類號: H04N7/52;H04N7/58;H04N7/24;H04L12/54
• 代理公司: 北京銀龍知識產權代理有限公司
• 代理人: 許靜

技術領域

本發明涉及無線通信領域中數據流的同步控制，尤其涉及一種多媒體數據流同步控制的方法及裝置。

背景技術

隨著無線通信網絡的不斷發展和終端功能的不斷加大，手機多媒體應用越來越普及，并深受人們的喜愛，其中的手機電視直播更是各種多媒體數據流應用中的一個熱點。目前，手機電視的多媒體數據流從信元到播放器主要經歷以下環節：

信元→編碼器→轉碼器→復用器→調制器→發射機→接收機→解調器→解復用器→播放器

在上述各個環節的網絡傳輸過程中，多媒體數據流可能出現延遲，造成不同類型的多媒體數據幀之間的不同步現象發生。另外，在編碼采樣過程中，由于不同類型的媒體數據往往因編碼采樣頻率的不同而造成播放時間上的不同步。例如，由音頻數據和視頻數據這兩種常見類型的媒體數據組成的電視節目，當視頻數據和音頻數據不同步時，將造成電視節目中畫面和聲音無法相互吻合，出現畫面超前于與該畫面相對應的聲音，或者畫面滯后于與該畫面相對應的聲音的情況。

圖1為實際情況下音頻數據幀和視頻數據幀的四種不同步類型的示意圖。圖1中，座標軸第一橫軸對應于視頻數據幀的時間戳Tv，座標軸第二橫軸對應于音頻數據幀的時間戳Ta，座標軸第三橫軸對應于系統時間戳Ts。其中，Tvn表示第n視頻數據幀的時間戳，Tan表示第n音頻數據幀的時間戳，Tsn表示第n系統時間戳。理想情況下，在每個系統時間戳所在的時刻發送一個音頻數據幀和一個視頻數據幀。而在實際情況下，由于網絡傳輸和編碼采樣頻率的不同，從而造成了單個音頻數據幀和單個視頻數據幀的不同步，下面結合附圖對四種音頻數據幀和視頻數據幀的不同步類型進行闡述：

圖1中，Tv1表示第一視頻數據幀的時間戳，Ta1表示第一音頻數據幀的時間戳，Ts1表示第一系統時間戳，Tv1、Ta1、Ts1共同表示了實際情況下音頻數據幀和視頻數據幀不同步的第一種類型：

第一視頻數據幀的時間戳Tv1和第一音頻數據幀的時間戳Ta1均超前于系統時間戳。

Tv2表示第二視頻數據幀的時間戳，Ta2表示第二音頻數據幀的時間戳，Ts2表示第二系統時間戳，Tv2、Ta2、Ts2共同表示了實際情況下音頻數據幀和視頻數據幀不同步的第二種類型：

第二視頻數據幀的時間戳Tv2和第二音頻數據幀的時間戳Ta2均滯后于第二系統時間戳Ts2。

Tv3表示第三視頻數據幀的時間戳，Ta3表示第三音頻數據幀的時間戳，Ts3表示第三系統時間戳，Tv3、Ta3、Ts3共同表示了實際情況下音頻數據幀和視頻數據幀不同步的第三種類型：

第三視頻數據幀的時間戳Tv3超前于第三系統時間戳Ts3，第三音頻數據幀的時間戳Ta3滯后于第三系統時間戳Ts3。

Tv4表示第四視頻數據幀的時間戳，Ta4表示第四音頻數據幀的時間戳，Ts4表示第四系統時間戳，Tv4、Ta4、Ts4共同表示了實際情況下音頻數據幀和視頻數據幀不同步的第四種類型：

第四視頻數據幀的時間戳Tv4滯后于第四系統時間戳Ts4，第四音頻數據幀的時間戳Ta4超前于第四系統時間戳Ts4。

由于實際情況中同一時間段內的視頻數據幀和音頻數據幀的數目可能不相同，因此，上述Tv1、Ta1、Ts1，...，Tvn、Tan、Tsn是為了更清楚地描述四種視頻數據幀與音頻數據幀不同步的類型，而不是強調第n視頻數據幀的時間戳Tvn與第n音頻數據幀的時間戳Tan以及第n系統時間戳相互之間必須完全對應。實際情況下，系統將需要發送的視頻數據幀序列與音頻數據幀序列緩存起來，按時間先后順序讀取單個視頻數據幀與單個音頻數據幀，然后在每個系統時間戳所在時刻將該單個視頻數據幀與單個音頻數據幀發送，也就是說，在一個系統時間戳所在時刻附近僅有一個需要發送的單個視頻數據幀和單個音頻數據幀。

目前的多媒體數據流系統中，一般通過轉碼器對音頻數據和視頻數據進行同步控制，但是在音頻數據和視頻數據通過轉碼器實現同步之后，還需要被進一步傳輸到播放器，而在此傳輸過程中，又可能造成同步后的音頻數據和視頻數據再次不同步的情況發生，從而影響播放器的正常播放。因此，如何保證播放器可以比較連續的接收到同步的音頻數據和視頻數據是一個比較突出的問題。

發明內容

有鑒于此，本發明的目的在于提供一種多媒體數據流同步控制的方法及裝置，來避免多媒體數據流播放過程中不同多媒體數據幀之間的不同步現象，達到改善多媒體數據流播放器的播放效果的目的。

本發明提供了一種多媒體數據流同步控制的方法，包括以下步驟：