[發明專利]一種基于直通音頻的TS傳輸流音視頻同步裝置和方法

有效

• 申請號: 201910090108.7
• 申請日: 2019-01-28
• 公開（公告）號: CN109889876B
• 公開（公告）日: 2022-11-29
• 發明（設計）人: 黃化吉;鄒偉華;袁金保;江銳
• 申請（專利權）人: 偉樂視訊科技股份有限公司
• 主分類號: H04N21/43
• 分類號: H04N21/43;H04N21/439;H04N21/44
• 代理公司: 廣州粵高專利商標代理有限公司 44102
• 代理人: 陳衛;禹小明

本發明涉及信息傳輸技術領域，具體公開了一種基于直通音頻的TS傳輸流音視頻同步裝置和方法，所述TS再編碼模塊，用于對源TS傳輸流進行再編碼，獲得再編碼TS傳輸流；所述音頻延時模塊，用于將源TS傳輸流中的音頻包進行延時，延時的時間對應為源TS傳輸流再編碼所需時間；所述頻差計算模塊，用于計算并輸出源編碼基準時鐘與再編碼基準時鐘之間的頻率偏差表征量；所述校準模塊，用于根據所述頻差計算模塊所輸出的頻率偏差表征量，校準再編碼TS傳輸流；所述碼流復用模塊，將校準后的再編碼TS傳輸流與延時后的源TS傳輸流中的音頻包進行復用輸出，本發明能夠解決再編碼音頻直通時終端播放唇音不同步問題，且實現簡單無需大量緩存，降低了資源的占用率。

技術領域

本發明涉及信息傳輸技術領域，尤其涉及一種基于直通音頻的TS傳輸流音視頻同步裝置和方法。

背景技術

電視運動圖像及伴音在數字化以后通常是使用TS傳輸流(Transport Stream，傳送數據流)的格式傳輸。TS傳輸流在應用的過程中，很多時候需要進行再編碼操作，以實現視頻像素點、清晰度的轉換。然而再編碼后輸出的音頻可能會存在失真，在質量上不夠原來的音頻信號好，因此需要將編碼后的視頻和編碼前的音頻一起組合重新復用為一個新的TS傳輸流后輸出。由于再編碼后使用的基準時鐘不可能是源編碼時鐘，會存在微小的頻偏，這就帶來了編碼后的視頻和編碼前的音頻時鐘基準不一致的問題，在再編碼一段時間之后就會出現音視頻不同步的情況，由此帶來畫面播放過程中唇音不同步的情況。

音視頻不同步，其原因在于音頻數據和視頻數據的編碼27MHz基準時鐘存在細微的頻偏，長期運行后音頻數據和視頻數據之間的DTS/PTS的偏差會累積，達到一定程度后本應同時播放的音頻數據和視頻數據其播放的時間就不一致了。

現有音視頻同步技術多是檢測累積時延誤差，當誤差達到一定程度后強制重同步消除誤差的定期重同步的方式來進行同步操作。這種方法的問題在于，重同步時必有以音頻或視頻一方作為基準(一般是以音頻為基準)，強制同步另一方的時間基準時正好有一小段數據落在這個時間區間，則會導致該段數據的播放順序是錯誤的，從而影響播放的流暢性。

發明內容

針對上述技術問題，本發明提供了一種可以快速的、自適應的調整源TS傳輸流音頻包和再編碼后的視頻包之間的DTS/PTS之間的偏差，無需涉及實際的硬件部件，達到實時快速準確的目的，消除音視頻不同步現象的基于直通音頻的TS傳輸流音視頻同步裝置和方法。

為了解決上述技術問題，本發明提供的具體方案如下：一種基于直通音頻的TS傳輸流音視頻同步裝置，包括：

TS再編碼模塊、音頻延時模塊、頻差計算模塊、校準模塊和碼流復用模塊；

所述TS再編碼模塊，用于對源TS傳輸流進行再編碼，獲得再編碼TS傳輸流；

所述音頻延時模塊，用于將所述源TS傳輸流中的音頻包進行延時，所述延時的時間對應為所述源TS傳輸流再編碼所需時間；

所述頻差計算模塊，用于計算并輸出源編碼基準時鐘與再編碼基準時鐘之間的頻率偏差表征量；

所述校準模塊，用于根據所述頻差計算模塊所輸出的頻率偏差表征量，校準所述再編碼TS傳輸流；以及

所述碼流復用模塊，用于將校準后的再編碼TS傳輸流與所述延時后的源TS傳輸流中的音頻包進行復用輸出。

優選的，所述頻差計算模塊包括時間信息提取模塊；所述時間信息提取模塊，用于提取所述源TS傳輸流中音頻包包含的源編碼基準時鐘時間信息參量與表征再編碼基準時鐘時間信息參量。

優選的，所述源編碼基準時鐘時間信息參量包括PTS時間戳和DTS時間戳；所述再編碼基準時鐘時間信息參量包括PCR時間戳。