[發明專利]VR眼鏡的實景觀測方法及VR眼鏡

有效

• 申請號: 201710586943.0
• 申請日: 2017-07-18
• 公開（公告）號: CN107368192B
• 公開（公告）日: 2021-03-02
• 發明（設計）人: 王鐵存
• 申請（專利權）人: 歌爾光學科技有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00
• 代理公司: 北京太合九思知識產權代理有限公司 11610
• 代理人: 劉戈

本發明提供一種VR眼鏡的實景觀測方法及VR眼鏡。其中，方法包括：響應于獲取下一幀待顯示圖像的指令，確定當前時刻的用戶頭部位姿數據；根據所述當前時刻的用戶頭部位姿數據以及所述廣角攝像頭拍攝實景圖像時刻的用戶頭部位姿數據，從所述廣角攝像頭拍攝到的所述實景圖像中選取送屏圖像；將所述送屏圖像作為下一幀待顯示圖像發送至顯示屏進行顯示，以供用戶觀測。本發明提供的技術方案，可以在用戶通過VR眼鏡觀測實景環境時，降低實景環境圖像的延遲。

技術領域

本發明涉及虛擬現實技術領域，尤其涉及一種VR眼鏡的實景觀測方法及VR眼鏡。

背景技術

VR(Virtual Reality，虛擬現實)技術是一種可以創建和體驗虛擬世界的計算機仿真系統，它利用計算機生成一種模擬環境，并通過多源信息融合的、交互式的三維動態視景和實體行為的系統仿真使用戶沉浸到該模擬環境中。

在使用VR眼鏡的過程中，用戶可能需要觀測現實景環境，比如在佩戴VR眼鏡玩游戲的過程中，要拿桌上的水杯喝水。若用戶在觀測實景環境時發生頭部轉動，則隨著用戶頭部的轉動，用戶通過VR眼鏡看到的實景圖像會發生延遲或卡頓。

發明內容

本發明提供一種VR眼鏡的實景觀測方法及VR眼鏡，用以在用戶通過VR眼鏡觀測實景環境時，降低實景環境圖像的延遲。

本發明提供一種VR眼鏡的實景觀測方法，適用于包含廣角攝像頭的VR眼鏡，包括：

響應于獲取下一幀待顯示圖像的指令，確定當前時刻的用戶頭部位姿數據；

根據所述當前時刻的用戶頭部位姿數據以及所述廣角攝像頭拍攝實景圖像時刻的用戶頭部位姿數據，從所述廣角攝像頭拍攝到的所述實景圖像中選取送屏圖像；

將所述送屏圖像作為下一幀待顯示圖像發送至顯示屏進行顯示，以供用戶觀測。

進一步可選地，根據所述當前時刻的用戶頭部位姿數據以及所述廣角攝像頭拍攝實景圖像時刻的用戶頭部位姿數據，從所述廣角攝像頭拍攝到的所述實景圖像中選取送屏圖像，包括：根據所述當前時刻的用戶頭部位姿數據，確定獲取送屏圖像時刻的用戶頭部位姿數據；根據所述獲取送屏圖像時刻的用戶頭部位姿數據以及所述拍攝實景圖像時刻的用戶頭部位姿數據，獲取圖像選取框的傾角以及所述圖像選取框的中心點在所述實景圖像中對應的位置；根據所述傾角，旋轉所述圖像選取框；采用所述旋轉后的圖像選取框，以所述圖像選取框的中心點在所述實景圖像中對應的位置為取景中心，從所述實景圖像中選取送屏圖像。

進一步可選地，根據所述當前時刻的用戶頭部位姿數據，確定獲取送屏圖像時刻的用戶頭部位姿數據，包括：以所述當前時刻的用戶頭部位姿數據作為獲取送屏圖像時刻的用戶頭部位姿數據。

進一步可選地，根據所述當前時刻的用戶頭部位姿數據，確定獲取送屏圖像時刻的用戶頭部位姿數據，包括：根據所述當前時刻的用戶頭部位姿數據，預測顯示送屏圖像時刻的用戶頭部位姿數據；以顯示送屏圖像時刻的用戶頭部位姿數據作為獲取送屏圖像時刻的用戶頭部位姿數據。

進一步可選地，獲取圖像選取框的傾角，包括：獲取用戶頭部從所述拍攝實景圖像時刻至所述獲取送屏圖像時刻的轉動數據；根據所述轉動數據所指示的用戶頭部的轉動角以及轉動方向，確定所述圖像選取框的傾角；獲取所述圖像選取框的中心點在所述實景圖像中對應的位置，包括：從所述頭部轉動數據中，確定所述VR眼鏡的透鏡的視場中心從所述拍攝實景圖像時刻到所述獲取送屏圖像時刻在與所述VR眼鏡平行的方向上的位移；在所述實景圖像中，基于所述位移，確定與所述實景圖像的中心點存在相應偏移量的一點，作為所述圖像選取框的中心點在所述實景圖像中對應的位置。

進一步可選地，采用旋轉后的圖像選取框，以所述圖像選取框的中心點在所述實景圖像中對應的位置為取景中心，從所述實景圖像中選取送屏圖像之前，還包括：根據所述透鏡的視場角以及所述透鏡和所述顯示屏之間的距離，確定圖像選取框的尺寸。