[發明專利]多媒體數據與其關聯互動數據的同步方法和裝置

有效

• 申請號: 201910168672.6
• 申請日: 2019-03-06
• 公開（公告）號: CN111669605B
• 公開（公告）日: 2021-10-26
• 發明（設計）人: 劉亞運;余學亮
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/2343;H04N21/262;H04N21/43;H04N21/8547
• 代理公司: 中國專利代理(香港)有限公司 72001
• 代理人: 孫之剛;閆小龍

本發明公開了一種多媒體數據與其關聯互動數據的同步方法，該方法包括：接收來自運營管理臺的針對互動數據的下發請求；接收來自運營管理臺的互動數據和用于多媒體數據的編碼配置；基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量；以及基于時間偏移量將互動數據在多媒體數據處理后臺的接入層中插入到多媒體數據中。還公開了一種同步裝置和計算機可讀存儲介質。

技術領域

本發明涉及多媒體數據的同步方法，具體來說涉及一種同步多媒體數據與其關聯的互動數據的方法、裝置和計算機可讀存儲介質。

背景技術

在大型直播活動中需要實時與觀眾側用戶進行互動的場景下，需要多媒體數據有較高的穩定性，并且互動數據與直播多媒體數據在絕對時間上保持強一致性。不同的直播設備（例如演播室的采集器、手機等）編碼能力不同，并且從主播端發起的互動數據需要經過采集與編碼、直播流后臺以及內容分發網絡CDN（Content Delivery Network），最終到觀眾端，因此互動數據（例如，用于展示信息、展示廣告、下發指令等）與直播流的同步展示比較困難，往往會出現互動數據早于對應的直播時間點展現到用戶端，造成互動時間點與直播畫面不匹配，影響用戶的整體互動體驗。

發明內容

提供一種可以緩解、減輕或消除上述問題的解決方案將是有利的。

根據本發明的一方面，提供了一種多媒體數據與其關聯互動數據的同步方法，該方法包括：接收來自運營管理臺的針對互動數據的下發請求；接收來自運營管理臺的互動數據和用于多媒體數據的編碼配置；基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量；以及基于時間偏移量將互動數據在多媒體數據處理后臺的接入層中插入到多媒體數據中。

根據一個實施例，基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量包括：通過多媒體數據的編碼時間與接收互動數據的延遲時間的差值來計算時間偏移量。

根據一個實施例，基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量還包括：預先將編碼配置同步并存儲在運營管理臺中。

根據一個實施例，該方法還包括基于編碼配置參數設定多媒體數據的編碼時間。

根據一個實施例，基于編碼配置參數設定多媒體數據的編碼時間還包括：基于至少兩個編碼配置參數的加權和來設定多媒體數據的編碼時間。

根據一個實施例，編碼配置中的編碼配置參數包括碼率、幀率和畫面組。

根據一個實施例，基于時間偏移量將互動數據在多媒體數據處理后臺的接入層中插入到多媒體數據中還包括：通過最新接收到的幀的時間戳是否大于等于時間偏移量來判斷最新接收到的多媒體數據的幀是否是互動數據意圖與其同步發送的幀，并在最新接收到的幀的時間戳大于等于時間偏移量時，在最新接收到的時間戳開始的時間處將互動數據在直播流后臺的接入層中插入到多媒體數據中。

根據本發明的另一方面提供了一種多媒體數據與其關聯互動數據的同步裝置，裝置包括：接收模塊，接收來自運營管理臺的針對互動數據的下發請求，以及接收來自運營管理臺的互動數據和用于多媒體數據的編碼配置；計算模塊，基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量；以及插入模塊，基于時間偏移量將互動數據在多媒體數據處理后臺的接入層中插入到多媒體數據中。

根據一個實施例，計算模塊基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量包括：計算模塊通過多媒體數據的編碼時間與接收互動數據的延遲時間的差值來計算時間偏移量。

根據一個實施例，計算模塊基于編碼配置計算出多媒體數據編碼后的時間戳與互動數據的插入時間點之間的時間偏移量還包括：計算模塊預先將編碼配置同步并存儲在運營管理臺中。