[發明專利]多設備間唇音同步方法及設備

有效

• 申請號: 201780049030.3
• 申請日: 2017-03-23
• 公開（公告）號: CN109565466B
• 公開（公告）日: 2020-11-06
• 發明（設計）人: 孫濤
• 申請（專利權）人: 華為技術有限公司
• 主分類號: H04L12/70
• 分類號: H04L12/70;H04L29/06
• 代理公司: 北京同立鈞成知識產權代理有限公司 11205
• 代理人: 朱穎;劉芳

本發明實施例提供一種多設備間唇音同步方法及設備，該方法包括：從設備接收主設備發送的RTCP報文，根據RTCP報文中的PCR、主設備節目時鐘頻率、從設備的節目時鐘頻率和RTCP時延校正自身的STC，接著接收主設備發布的RTP，將RTP拼接成完整的音頻數據幀放入從設備的PCM緩存，輸出PCM緩存中的音頻數據幀。

技術領域

本發明實施例涉及通信技術領域，尤其涉及一種多設備間唇音同步方法及設備。

背景技術

隨著WIFI音箱和藍牙音箱的廣泛應用，音視頻播放設備通過無線連接的方式將音頻數據發送到WIFI音箱或藍牙音箱，由音視頻播放設備播放視頻，WIFI音箱或藍牙音箱播放音頻的這一應用得到越來越多的用戶青睞。該應用中，最重要的問題是要保證唇音同步，才能給用戶帶來良好的使用體驗。

在現有的藍牙音箱的使用過程中，音視頻播放設備中的藍牙驅動模塊從自身的音頻脈沖編碼調制(Pulse Code Modulation，PCM)緩存中讀取音頻PCM數據，并通過藍牙協議實時發送到藍牙音箱，藍牙音箱的藍牙音頻驅動模塊基于藍牙協議接收PCM數據，并將PCM數據實時發送到藍牙音箱的音頻PCM緩存，藍牙音箱的PCM播放驅動模塊直接從藍牙音箱的音頻PCM緩存讀取音頻PCM數據播放輸出。

可以看出，藍牙音箱只解決了音頻跨設備輸出的問題，不能實現設備間的唇音同步，上述方法應用到WIFI音箱亦是如此，且對于WIFI音箱而言，由于WIFI路由器轉發時延導致音視頻輸出不同步進一步加劇，如何實現多設備間唇音同步，是一個需要解決的問題。

發明內容

本發明實施例提供一種多設備間唇音同步方法及設備，解決多設備間同步播放視頻和音頻時如何實現唇音同步的問題。

第一方面，本發明實施例提供一種多設備間唇音同步方法，用于一個主設備同步輸出音頻和視頻到至少一個從設備中，方法包括：從設備接收主設備發送的實時控制協議RTCP報文，RTCP報文中的實時流分組RTP時間戳頭域攜帶主設備周期性采集的節目時鐘參考PCR，RTCP報文中的網絡時間協議NTP域攜帶RTCP報文的發送時間點；從設備根據PCR、主設備節目時鐘頻率、從設備的節目時鐘頻率和RTCP時延校正自身的系統時鐘STC；從設備根據主設備發送的組播服務地址和端口接收主設備發布的RTP，將RTP拼接成完整的音頻數據幀，并從RTP分組的時間戳頭域獲取音頻數據幀對應的顯示時間戳PTS，將音頻數據幀放入從設備的音頻脈沖編碼調制PCM緩存；從設備根據自身的STC和音頻數據幀顯示時間戳輸出音頻PCM緩存中的音頻數據幀。從而，實現了主設備帶動從設備同步輸出音視頻數據，實現主設備和從設備間的唇音同步，給用戶帶來良好的使用體驗。

在一種可能的設計中，RTCP報文中攜帶RTCP會話標識，從設備根據PCR、主設備節目時鐘頻率、從設備的節目時鐘頻率和RTCP時延校正自身的系統時鐘STC之前，還包括：從設備向主設備發送加入RTCP會話請求，以使主設備向從設備發送RTCP會話標識。

在一種可能的設計中，從設備根據PCR、主設備節目時鐘頻率、從設備的節目時鐘頻率和RTCP時延校正自身的系統時鐘STC，包括：從設備根據如下公式計算出從設備的STC校正值scr_correct：

scr_correct＝scr_srv*scf_clt/scf_srv+(ntp_rcv-ntp_snd)*scf_clt/1000

其中，scf_clt為從設備節目時鐘頻率，scf_srv主設備節目時鐘頻率，ntp_rcv為接收到RTCP報文的時刻，scr_srv和ntp_snd分別為PCR和RTCP報文的發送時間點；

從設備根據計算出的STC校正值校正自身的STC。