[發明專利]基于墨水屏設備的音視頻幀同步方法、裝置和計算機設備

有效

• 申請號: 202110578862.2
• 申請日: 2021-05-26
• 公開（公告）號: CN113316012B
• 公開（公告）日: 2022-03-11
• 發明（設計）人: 邵清;鄭勇;袁健;戴志濤
• 申請（專利權）人: 深圳市沃特沃德信息有限公司
• 主分類號: H04N21/43
• 分類號: H04N21/43;H04N21/2187;G09G3/34;G09F9/37;G09F27/00
• 代理公司: 深圳市明日今典知識產權代理事務所(普通合伙) 44343
• 代理人: 王杰輝;熊成龍

1.一種基于墨水屏設備的音視頻幀同步方法，其特征在于，包括：

緩存音頻數據和視頻數據，所述音頻數據和所述視頻數據源于同一媒體數據，所述音頻數據包括多個帶有第一時間戳的音頻幀，所述視頻數據包括多個帶有第二時間戳的視頻幀；

從各所述視頻幀中篩選出若干個關鍵視頻幀，所述關鍵視頻幀表征具有預設特征的視頻幀；

將所述音頻數據的播放總時長除以所述關鍵視頻幀的數量，得到各所述關鍵視頻幀的播放時長；

將各所述音頻幀按照各自對應的第一時間戳進行順序播放，同時控制各所述關鍵視頻幀按照各自對應的第二時間戳以及播放時長進行順序播放，實現所述音頻幀和所述視頻幀的同步播放。

2.根據權利要求1所述的基于墨水屏設備的音視頻幀同步方法，其特征在于，所述緩存音頻數據和視頻數據的步驟，包括：

通過無線網絡接收所述媒體數據，并緩存至預設緩存區；

將所述媒體數據進行解復用處理，得到所述音頻數據和所述視頻數據；

分別將所述音頻數據和所述視頻數據進行解碼處理，得到各所述音頻幀和各自對應的第一時間戳，以及各所述視頻幀和各自對應的第二時間戳。

3.根據權利要求1所述的基于墨水屏設備的音視頻幀同步方法，其特征在于，所述墨水屏設備包括墨水顯示屏，所述將各所述音頻幀按照各自對應的第一時間戳進行順序播放，同時控制各所述關鍵視頻幀按照各自對應的第二時間戳以及播放時長進行順序播放，實現所述音頻幀和所述視頻幀的同步播放的步驟，包括：

以所述音頻數據中排序首位的音頻幀對應的第一時間戳為開始時間戳，將各所述音頻幀按照各自對應的第一時間戳順序進行播放，同時將各所述關鍵視頻幀按照各自對應的第二時間戳和播放時長順序輸出到所述墨水顯示屏進行顯示。

4.根據權利要求1所述的基于墨水屏設備的音視頻幀同步方法，其特征在于，所述根據所述關鍵視頻幀的數量及所述音頻數據的播放總時長，設置各所述關鍵視頻幀的播放時長的步驟之后，包括：

將各所述關鍵視頻幀按照各自對應的所述第二時間戳、所述播放時長以及所述播放總時長，重新設置各所述關鍵視頻幀分別對應的第三時間戳，所述第三時間戳包括關鍵視頻幀的開始時間戳和結束時間戳。

5.根據權利要求4所述的基于墨水屏設備的音視頻幀同步方法，其特征在于，所述將各所述關鍵視頻幀按照各自對應的所述第二時間戳、所述播放時長以及所述播放總時長，重新設置各所述關鍵視頻幀分別對應的第三時間戳的步驟之后，包括：

將各所述音頻幀按照各自對應的第一時間戳進行順序播放，同時控制各所述關鍵視頻幀按照各自對應的第三時間戳進行順序播放，實現所述音頻幀和所述視頻幀的同步播放。

6.根據權利要求1所述的基于墨水屏設備的音視頻幀同步方法，其特征在于，所述關鍵視頻幀為幀內編碼幀。

7.一種基于墨水屏設備的音視頻幀同步裝置，其特征在于，包括：

緩存模塊，用于緩存音頻數據和視頻數據，所述音頻數據和所述視頻數據源于同一媒體數據，所述音頻數據包括多個帶有第一時間戳的音頻幀，所述視頻數據包括多個帶有第二時間戳的視頻幀；

篩選模塊，用于從各所述視頻幀中篩選出若干個關鍵視頻幀，所述關鍵視頻幀表征具有預設特征的視頻幀；

第一設置模塊，用于根據所述關鍵視頻幀的數量及所述音頻數據的播放總時長，設置各所述關鍵視頻幀的播放時長；

第一同步模塊，用于將各所述音頻幀按照各自對應的第一時間戳進行順序播放，同時控制各所述關鍵視頻幀按照各自對應的第二時間戳以及播放時長進行順序播放，實現所述音頻幀和所述視頻幀的同步播放；

所述第一設置模塊，包括：

計算單元，用于將所述播放總時長除以所述關鍵視頻幀的數量，得到各所述關鍵視頻幀的播放時長。

8.一種計算機設備，包括存儲器和處理器，所述存儲器中存儲有計算機程序，其特征在于，所述處理器執行所述計算機程序時實現權利要求1至5中任一項所述方法的步驟。

9.一種計算機可讀存儲介質，其上存儲有計算機程序，其特征在于，所述計算機程序被處理器執行時實現權利要求1至5中任一項所述的方法的步驟。