[發明專利]一種音視頻傳輸方法、裝置、電子設備及存儲介質

在審

• 申請號: 202010153193.X
• 申請日: 2020-03-06
• 公開（公告）號: CN111447396A
• 公開（公告）日: 2020-07-24
• 發明（設計）人: 謝文龍;李云鵬;呂亞亞;楊春暉
• 申請（專利權）人: 視聯動力信息技術股份有限公司
• 主分類號: H04N7/15
• 分類號: H04N7/15;H04N7/18;H04N21/242;H04N21/8547
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 蘇培華

1.一種音視頻傳輸方法，其特征在于，應用于數據傳輸設備，包括：

接收外部視頻采集設備發送的視頻數據；

獲得所述數據傳輸設備自身的音頻采集組件采集的音頻數據，所述音頻數據與所述視頻數據具有時序關聯關系；

根據所述時序關聯關系，對所述視頻數據和所述音頻數據進行同步處理，獲得同步音視頻數據；

將所述同步音視頻數據發送給接收端。

2.根據權利要求1所述的方法，其特征在于，根據所述時序關聯關系，對所述視頻數據和所述音頻數據進行同步處理，獲得同步音視頻數據，包括：

通過第一線程，對所述音頻數據進行處理，獲得音頻處理結果；

通過第二線程，對所述視頻數據進行處理，獲得視頻處理結果；

通過第三線程，根據所述音頻處理結果、所述視頻處理結果和所述時序關聯關系，對所述視頻數據和所述音頻數據進行同步處理，獲得所述同步音視頻數據:

將所述同步音視頻數據發送給接收端，包括：

通過所述第三線程，將所述同步音視頻數據發送給接收端；

其中，所述第三線程為所述第一線程和所述第二線程中的任意一條線程，或者，所述第三線程不同于所述第一線程和所述第二線程。

3.根據權利要求2所述的方法，其特征在于，對所述音頻數據進行處理，獲得音頻處理結果，包括：

對所述音頻數據進行封裝，獲得音頻數據包，每個所述音頻數據包攜帶時間戳；

對所述視頻數據進行處理，獲得視頻處理結果，包括：

對所述視頻數據進行封裝，獲得視頻數據包，每個所述視頻數據包攜帶時間戳；

根據所述音頻處理結果、所述視頻處理結果和所述時序關聯關系，對所述視頻數據和所述音頻數據進行同步處理，包括：

根據所述音頻數據包的時間戳、所述視頻數據包的時間戳、相鄰視頻數據包的時間間隔值以及預設閾值，確定目標音頻數據包和目標視頻數據包；

按照時間戳先后順序對所述目標音頻數據包和目標視頻數據包進行同步處理。

4.根據權利要求3所述的方法，其特征在于，根據所述音頻數據包的時間戳、所述視頻數據包的時間戳、相鄰視頻數據包的時間間隔值以及預設閾值，確定目標音頻數據包和目標視頻數據包，包括：

將最新的視頻數據包確定為所述目標視頻數據包；

將所有音頻數據包中的時間戳大于預設差值的音頻數據包確定為第一類型的音頻數據包，所述預設差值為所述目標視頻數據包的時間戳與所述預設閾值的差值；

根據所述時間間隔值與所述預設閾值的大小關系，從所述第一類型的音頻數據包中確定所述目標音頻數據包。

5.根據權利要求4所述的方法，其特征在于，根據所述時間間隔值與所述預設閾值的大小關系，從所述第一類型的音頻數據包中確定所述目標音頻數據包，包括：

在所述時間間隔值小于所述預設閾值時，將所述第一類型的音頻數據包中的時間戳小于第一和值的音頻數據包確定為所述目標音頻數據包，所述第一和值為所述目標視頻數據包的時間戳與所述時間間隔值的和值；

在所述時間間隔值不小于所述預設閾值時，將所述第一類型的音頻數據包中的時間戳小于第二和值的音頻數據包確定為所述目標音頻數據包，所述第二和值為所述目標視頻數據包的時間戳與所述預設閾值的和值。

6.根據權利要求4所述的方法，其特征在于，按照時間戳先后順序對所述目標音頻數據包和目標視頻數據包進行同步處理，包括：

按照時間戳先后順序對所述目標音頻數據包和所述目標視頻數據包進行排序；

將所述同步音視頻數據發送給接收端，包括：

依次將時間戳小于所述目標視頻數據包的時間戳的目標音頻數據包、所述目標視頻數據包以及時間戳不小于所述目標視頻數據包的時間戳的目標音頻數據包發送給所述接收端。

7.根據權利要求1所述的方法，其特征在于，在將所述同步音視頻數據發送給接收端后，所述方法還包括：

接收所述接收端返回的音頻響應數據；

播放所述音頻響應數據。