[發(fā)明專利]一種基于多音視頻流合成VR的系統(tǒng)

有效

• 申請?zhí)枺?/td>: 202010780711.0
• 申請日: 2020-08-06
• 公開（公告）號: CN111901692B
• 公開（公告）日: 2022-09-06
• 發(fā)明（設計）人: 沈德歡;裘昊;陳勇;朱益中
• 申請（專利權）人: 杭州當虹科技股份有限公司
• 主分類號: H04N21/81
• 分類號: H04N21/81;H04N21/234;H04N21/233;H04N21/2368
• 代理公司: 杭州橙知果專利代理事務所(特殊普通合伙) 33261
• 代理人: 賀龍萍

本發(fā)明公開了一種基于多音視頻流合成VR的系統(tǒng)。它包括設備發(fā)送端、收錄服務器、合成服務器、流媒體服務器、控制臺服務器和VR觀看端；設備發(fā)送端將流數(shù)據(jù)推送到收錄服務器；收錄服務器接收流數(shù)據(jù)并緩存；合成服務器把單個視頻流和多個音頻流的封裝起來，并送給流媒體服務器；流媒體服務器存儲最終合成后的流數(shù)據(jù)；VR觀看端觀看設備播放合成后的流數(shù)據(jù)；控制臺服務器分別與收錄服務器、合成服務器和流媒體服務器連接。本發(fā)明的有益效果是：實現(xiàn)了多個視頻流和多個音頻流封裝成單個VR視頻流和多個音頻流。

技術領域

本發(fā)明涉及音視頻處理相關技術領域，尤其是指一種基于多音視頻流合成VR的系統(tǒng)。

背景技術

目前大多數(shù)VR視頻都是單個視頻源里單個視頻畫面，對應著單個音頻。隨著后面5G的普及，VR的應用方式也會呈現(xiàn)多樣式。如何把多個視頻流和多個音頻流封裝成單個VR視頻流和多個音頻流的系統(tǒng)，還未有相應的解決辦法。

發(fā)明內(nèi)容

本發(fā)明是為了克服現(xiàn)有技術中存在上述的不足，提供了一種解決多音視頻流合成VR單視頻流多音頻流的基于多音視頻流合成VR的系統(tǒng)。

為了實現(xiàn)上述目的，本發(fā)明采用以下技術方案：

一種基于多音視頻流合成VR的系統(tǒng)，包括設備發(fā)送端、收錄服務器、合成服務器、流媒體服務器、控制臺服務器和VR觀看端；所述的設備發(fā)送端將流數(shù)據(jù)推送到收錄服務器，流數(shù)據(jù)由視頻流和音頻流組成；所述的收錄服務器接收流數(shù)據(jù)并緩存，流數(shù)據(jù)等待合成服務器進一步處理；所述的合成服務器從收錄服務器拉取需要合成VR視頻流的多條流數(shù)據(jù)，最終把單個視頻流和多個音頻流的封裝起來，并送給流媒體服務器；所述的流媒體服務器存儲最終合成后的流數(shù)據(jù)；所述的VR觀看端觀看設備播放合成后的流數(shù)據(jù)；所述的控制臺服務器分別與收錄服務器、合成服務器和流媒體服務器連接。

通過上述系統(tǒng)的設計，實現(xiàn)了多個視頻流和多個音頻流封裝成單個VR視頻流和多個音頻流。

作為優(yōu)選，所述合成服務器的操作方法如下：

(1)從收錄服務器拉取需要合成VR視頻流的多條流數(shù)據(jù)；

(2)對每條流數(shù)據(jù)進行解封裝，將每條流數(shù)據(jù)解封裝為音頻包和視頻包；

(3)對每條流數(shù)據(jù)的音頻包進行解碼成PCM，將PCM重新編碼成音頻包；

(4)對每條流數(shù)據(jù)的視頻包進行解碼成對應的顏色空間，然后將該顏色空間轉(zhuǎn)換成統(tǒng)一的顏色空間；

(5)把轉(zhuǎn)換后統(tǒng)一的顏色空間按控制臺服務器設置的合成模板合成VR的顏色空間；

(6)將合成VR的顏色空間進行編碼成一個視頻包；

(7)將一個視頻包和重新編碼后的多個音頻包進行封裝，封裝成單個視頻流多個音頻流的流數(shù)據(jù)，并送給流媒體服務器。

作為優(yōu)選，所述的控制臺服務器設置收錄服務器緩存流數(shù)據(jù)的時間。

作為優(yōu)選，所述的控制臺服務器設置合成服務器中支持的封裝格式、編解碼類型以及合成模板樣式，所述的合成模板主要規(guī)定顏色空間的數(shù)量、位置、形狀。

作為優(yōu)選，所述的控制臺服務器設置流媒體服務器的播放方式、清晰度選項、支持的封裝格式、存儲時間及空間。

本發(fā)明的有益效果是：實現(xiàn)了多個視頻流和多個音頻流封裝成單個VR視頻流和多個音頻流。

附圖說明

圖1是本發(fā)明的系統(tǒng)框圖；

圖2是本發(fā)明合成服務器的方法流程圖；

圖3是合成模板的合成效果圖。

具體實施方式

下面結合附圖和具體實施方式對本發(fā)明做進一步的描述。