[發明專利]全景視頻中虛擬對象的光影渲染方法、裝置及電子設備

在審

• 申請號: 201810975331.5
• 申請日: 2018-08-24
• 公開（公告）號: CN109064544A
• 公開（公告）日: 2018-12-21
• 發明（設計）人: 奧利維爾·菲永;李建億
• 申請（專利權）人: 太平洋未來科技(深圳)有限公司
• 主分類號: G06T15/50
• 分類號: G06T15/50;G06T19/00;G06K9/62;H04M1/04;H04M1/02
• 代理公司: 深圳市朝聞專利代理事務所(普通合伙) 44454
• 代理人: 羅仲輝

本發明實施例提供一種全景視頻中虛擬對象的光影渲染方法、裝置及電子設備，包括：判斷全景視頻在顯示屏幕的當前畫面是否包括預設的虛擬對象特征點；若包括所述虛擬對象特征點，將將所述當前畫面分解成第一預設數量的子圖片；根據所述子圖片的圖像矩確定光強加權中心，基于所述子圖片的所述光強加權中心和幾何中心確定所述當前畫面的光源位置信息；基于所述虛擬對象特征點確定所述虛擬對象的輪廓信息和位置信息；根據所述光源位置信息和所述虛擬對象的輪廓信息、位置信息，生成所述虛擬對象的光影效果。能夠實時確定當前播放的全景視頻中是否包括虛擬對象，根據視頻中光源位置來生成虛擬對象的光影效果。

技術領域

本發明涉及圖像處理技術領域，尤其涉及一種全景視頻中虛擬對象的光影渲染方法、裝置及電子設備。

背景技術

虛擬現實技術旨在使用計算機技術構建一個與現實世界具有相同感知的虛擬世界，用戶觀看全景視頻的時候可以360度任意角度拖動觀看全景視頻，使其有一種真 正意義上身臨其境的感覺，另外通過佩戴VR眼鏡觀看會有更強的沉浸感。然而在實 現本發明的過程中，發明人發現相關技術中，由于虛擬對象都是預先通過計算機生成 的，且全景視頻的畫面區域是可以360度切換的，無法預先獲取用戶觀看全景視頻中 的哪個區域，從而不能預先給虛擬對象添加光影效果。

由于成本高昂，越來越多的移動設備用戶不再直接通過專門的VR頭盔觀看VR 視頻，而是通過簡易的VR鏡片直接觀看手機或電視屏幕播放的VR視頻。為了避免用 戶長時間手持手機觀看視頻導致體力不支，往往需要將手機安裝于支架上以保持穩 定，普通用戶往往使用手機簡易支架就能達到所需的穩定支撐的效果，而現有的簡易 支架通常位于手機保護殼上、或通過強力膠粘貼在手機背部，因為手機玻璃日益堅 固、手機散熱問題、手機美觀度的原因，用戶往往不愿意使用手機保護殼和膠粘的簡 易支架。

發明內容

本發明實施例提供的全景視頻中虛擬對象的光影渲染方法、裝置及電子設備， 用以至少解決相關技術中的上述問題。

本發明實施例一方面提供了一種全景視頻中虛擬對象的光影渲染方法，包括：

判斷全景視頻在顯示屏幕的當前畫面是否包括預設的虛擬對象特征點；若包括所述虛擬對象特征點，將將所述當前畫面分解成第一預設數量的子圖片；根據所述子 圖片的圖像矩確定光強加權中心，基于所述子圖片的所述光強加權中心和幾何中心 確定所述當前畫面的光源位置信息；基于所述虛擬對象特征點確定所述虛擬對象的 輪廓信息和位置信息；根據所述光源位置信息和所述虛擬對象的輪廓信息、位置信 息，生成所述虛擬對象的光影效果。

進一步地，所述方法還包括：預先在全景視頻的目標幀畫面上設置虛擬對象， 記錄所述目標幀畫面的第一幀標識、所述代表所述虛擬對象關鍵特征的特征點的第 一坐標以及所述第一坐標與所述第一幀標識的對應關系。

進一步地，所述判斷全景視頻當前畫面是否包括預設的虛擬對象特征點，包括：獲取所述當前畫面對應的第二幀標識；將所述第二幀標識與所述第一幀標識進行匹 配，確定與所述第二幀標識匹配的目標第一幀標識，并根據所述對應關系確定所述目 標第一幀標識對應的目標第一坐標；按照預設模型將所述目標第一坐標轉化為所述 顯示屏幕對應的目標第二坐標；判斷所述目標第二坐標是否處于所述顯示屏幕坐標 范圍內；若處于所述顯示屏幕坐標范圍內，確定全景視頻當前畫面包括預設的虛擬對 象特征點。

進一步地，所述基于所述虛擬對象特征點確定所述虛擬對象的輪廓信息和位置信息，包括：根據處于所述顯示屏幕坐標范圍內的目標第二坐標，確定所述虛擬對象 的輪廓信息；根據所述輪廓信息確定所述虛擬對象在所述顯示屏幕的中心坐標，將所 述中心坐標作為所述虛擬對象的位置信息。