[發明專利]VR直播視頻處理的方法和系統

在審

• 申請號: 201811366415.5
• 申請日: 2018-11-16
• 公開（公告）號: CN109729368A
• 公開（公告）日: 2019-05-07
• 發明（設計）人: 李光煌;羅輝;陳濱;覃國秘;李萬建;鐘志威;朱鵬惠
• 申請（專利權）人: 深圳市賽億科技開發有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/234;H04N21/2343;H04N21/44;H04N21/8547
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發明公開了VR直播視頻處理的方法，方法：采集端采集背景畫面和運動畫面，檢測運動物體；針對每幀運動畫面確定運動物體所在區域、背景畫面中與所在區域對應的第一區域，截取所在區域的第一畫面；將背景畫面、第一畫面、第一畫面在背景畫面中對應的第一區域傳至服務器端；服務器端將接收到的數據發給客戶端；客戶端針對每幀第一畫面根據背景畫面復制生成第一背景畫面，將對應第一畫面粘貼至第一背景畫面的第一區域形成完整畫面，所有完整畫面組成第一視頻流；對第一視頻流進行渲染輸出。本發明還公開了一種系統。本發明的方法和系統，在不影響VR直播視頻的清晰度前提下，減輕了采集端到服務器端上傳帶寬壓力和服務器端到客戶端下發帶寬壓力。

技術領域

本發明涉及通訊技術領域，尤其涉及一種VR直播視頻處理的方法和系統。

背景技術

目前網絡直播非常火爆，據說風頭正旺的直播平臺已經達到116個。隨著VR的興起，VR直播視頻也會慢慢會火起來。VR這種360度全景效果能給觀看者帶來全新的體驗，必將成為一種新的直播方式被普羅大眾所接受。

VR直播視頻需要完成360°的全景素材采集，就目前而言，VR全景視頻的采集只有依靠多個廣角鏡頭進行采集。然后通過計算機圖形算法拼接成一個完整的全景視頻。

VR視頻目前采用球面投影方式，通過VR終端觀看時只是觀看其中一部分畫面內容。因此在畫面清晰度相同的前提下，VR直播視頻的分辨率比傳統直播視頻的分辨率更大。即實時播放畫面清晰度相同視頻的條件下，VR直播視頻比傳統直播視頻需要更大的網絡傳輸帶寬，給當前的網絡帶寬帶來很大的壓力。

發明內容

本發明的主要目的在于解決現有技術中VR直播視頻相比傳統直播視頻需要更大的網絡傳輸帶寬，給當前的網絡帶寬帶來很大壓力的技術問題。

為實現上述目的，本發明提供一種VR直播視頻處理的方法，所述VR直播視頻處理的方法包括：

采集端實時采集背景畫面和后續的運動畫面，所述背景畫面和所述運動畫面形成視頻流，檢測視頻流中的運動物體；

針對每幀運動畫面，確定運動物體的所在區域、所述背景畫面中與所述所在區域對應的第一區域，截取所述所在區域的第一畫面；

實時將所述背景畫面、每幀所述第一畫面、以及每幀所述第一畫面在所述背景畫面中對應的所述第一區域上傳至服務器端；

所述服務器端實時將所接收的所述背景畫面、所述第一畫面、以及每幀所述第一畫面在所述背景畫面中對應的所述第一區域下發給客戶端；

所述客戶端針對每幀所述第一畫面，根據所述背景畫面復制生成一幀第一背景畫面，將對應的第一畫面粘貼至所述第一背景畫面中對應的第一區域中，形成一幀完整畫面，將所有完整畫面組成第一視頻流；

對所述第一視頻流進行渲染輸出。

優選地，所述采集端采用光流法、幀差法、或者背景差分法檢測所述視頻流中的運動物體。

優選地，所述每一幀第一畫面攜帶有對應幀運動畫面在所述視頻流中的時間戳；

所述客戶端將所有完整畫面組成第一視頻流具體包括：

所述客戶端依照每幀完整畫面對應的第一畫面攜帶的時間戳，將所有的完整畫面組成所述第一視頻流。

此外，為實現上述目的，本發明還提供一種VR直播視頻處理的系統，所述VR直播視頻處理的系統包括：

采集端，用于實時采集背景畫面和后續的運動畫面，所述背景畫面和所述運動畫面形成視頻流，檢測視頻流中的運動物體；針對每幀運動畫面，確定運動物體的所在區域、所述背景畫面中與所述所在區域對應的第一區域，截取所述所在區域的第一畫面；以及實時將所述背景畫面、每幀所述第一畫面、以及每幀所述第一畫面在所述背景畫面中對應的所述第一區域上傳至服務器端；