[發明專利]全景視頻生成、播放方法及裝置、全景視頻生成系統

在審

• 申請號: 202010890173.0
• 申請日: 2020-08-28
• 公開（公告）號: CN112218099A
• 公開（公告）日: 2021-01-12
• 發明（設計）人: 樊兵;張君琦;陳李;戴霖;馬琳琰
• 申請（專利權）人: 新奧特（北京）視頻技術有限公司
• 主分類號: H04N21/218
• 分類號: H04N21/218;H04N21/242;H04N5/232;G06T7/80
• 代理公司: 北京潤澤恒知識產權代理有限公司 11319
• 代理人: 楊愛平

1.一種全景視頻生成方法，其特征在于，所述方法包括：

采集攝像機矩陣中所包括的至少兩個攝像機根據同步信號在每個拍攝時刻同步獲取的至少兩個目標信息，所述同步信號對應于至少兩個所述拍攝時刻，至少兩個所述攝像機按照全景拼接對應的預設方式排列，所述目標信息包括所述攝像機通過目標拍攝參數拍攝的第一圖像和在所述拍攝時刻采集的第一音頻；

針對每個所述拍攝時刻，根據至少兩個所述目標信息生成目標全景信息，所述目標全景信息包括基于至少兩個所述第一圖像生成的全景圖像和基于至少兩個所述第一音頻確定的目標音頻；

根據至少兩個所述目標全景信息，生成全景視頻并推送至客戶端。

2.根據權利要求1所述的全景視頻生成方法，其特征在于，所述采集攝像機矩陣中所包括的至少兩個攝像機根據同步信號在每個拍攝時刻同步獲取的至少兩個目標信息之前，還包括：

確定所述目標拍攝參數，根據所述目標拍攝參數生成拍攝參數調節信號，將所述拍攝參數調節信號傳輸至至少兩個所述攝像機，以控制每個所述攝像機的拍攝參數均調節為所述目標拍攝參數；

根據預設頻率的方波信號生成所述同步信號，將所述同步信號傳輸至至少兩個所述攝像機，以控制每個所述攝像機在所述方波信號的電平變化時刻執行拍攝動作并采集所述第一音頻，其中所述方波信號的電平變化時刻對應于所述同步信號的拍攝時刻。

3.根據權利要求1所述的全景視頻生成方法，其特征在于，所述采集攝像機矩陣中所包括的至少兩個攝像機根據同步信號在每個拍攝時刻同步獲取的至少兩個目標信息，包括：

針對每個所述拍攝時刻，同步接收至少兩個所述攝像機分別傳輸的所述目標信息；

對接收的至少兩個所述目標信息進行同步時鐘校驗；

在同步時鐘校驗通過的情況下，確定接收到的至少兩個所述目標信息對應于同一所述拍攝時刻，將接收到的至少兩個所述目標信息進行編碼并存儲至預設位置。

4.根據權利要求1所述的全景視頻生成方法，其特征在于，所述根據至少兩個所述目標信息生成目標全景信信息，包括：

根據圖像拼接參數，對至少兩個所述第一圖像進行圖像拼接，生成所述全景圖像，其中，相鄰的所述第一圖像存在重疊區域；

在至少兩個所述第一音頻中篩選出優先級最高的所述目標音頻；

將所述全景圖像和所述目標音頻進行組合，生成所述目標全景信信息；

其中，在首次執行圖像拼接時，確定攝像機內參以及相鄰所述第一圖像的重疊區域對應的標定特征點，根據所述攝像機內參和所述標定特征點對所述重疊區域進行矯正，進行圖像融合歸一化處理并完成圖像拼接，在圖像拼接后生成所述圖像拼接參數。

5.一種全景視頻播放方法，其特征在于，包括：

接收全景視頻生成系統推送的全景視頻，所述全景視頻包括至少兩幀全景圖像以及每幀所述全景圖像對應的目標音頻；

響應于用戶所執行的第一輸入，以目標方式播放目標內容，所述目標內容包括所述全景圖像的至少部分圖像內容以及所述全景圖像對應的所述目標音頻。

6.根據權利要求5所述的全景視頻播放方法，其特征在于，所述響應于用戶所執行的第一輸入，以目標方式播放目標內容，包括以下方案中的任意一項：

響應于所述第一輸入，控制所述全景圖像以預設傾斜角度進行顯示并輸出對應的所述目標音頻；

響應于所述第一輸入，在所述全景圖像中選定局部圖像放大顯示并輸出對應的所述目標音頻；

響應于所述第一輸入，在所述全景圖像中標定運動目標，顯示所述運動目標并輸出對應的所述目標音頻。