[發明專利]在虛擬或增強現實場景內進行用戶交互的方法和系統

有效

• 申請號: 201580071504.5
• 申請日: 2015-12-07
• 公開（公告）號: CN107111340B
• 公開（公告）日: 2020-09-01
• 發明（設計）人: E.拉森;F.烏明格;X.葉;N.里蒙;J.R.斯塔福德;X.婁
• 申請（專利權）人: 索尼互動娛樂股份有限公司
• 主分類號: G06F1/16
• 分類號: G06F1/16;G06F3/01;G02B27/01
• 代理公司: 北京市柳沈律師事務所 11105
• 代理人: 張曉明

頭戴式顯示器內的慣性傳感器用來追蹤所述頭戴式顯示器的移動。所述頭戴式顯示器的所述追蹤的移動與虛擬現實場景內的目前顯示給佩戴所述頭戴式顯示器的用戶的動作關聯。所述虛擬現實場景內的所述動作基于目前顯示的所述虛擬現實場景的情形。所述頭戴式顯示器的所述檢測的移動可與諸如注視檢測數據的其他傳感器數據結合來確定所述虛擬現實場景內的所述動作。以此方式，如使用所述頭戴式顯示器內的所述慣性傳感器檢測的所述用戶的移動用作輸入來在如所述頭戴式顯示器內顯示給所述用戶的所述虛擬現實場景的所述當前情形內引發動作。

技術領域

本發明涉及用于在虛擬現實空間內進行用戶交互的方法和系統。

背景技術

在虛擬現實系統中，用戶在視覺上變得沉浸在計算機產生的三維虛擬現實場景中。在一些應用中，如向用戶顯示的整個虛擬現實場景是計算機產生的。在其他應用中，虛擬現實場景的一部分是計算機產生的，同時虛擬現實場景的另一部分對應于現實物體和/或個人的視頻和/或圖像，其中此類現實視頻/圖像可基本上實時地在虛擬現實場景中渲染。此類應用可被稱為增強現實應用。

在許多虛擬現實應用中，不僅希望使用戶感覺在視覺上沉浸在虛擬現實場景中，而且希望為用戶提供與顯示在虛擬現實場景內的特征自然交互的感覺。本發明就是在這種情形下產生。

發明內容

在示例性實施方案中，一種方法包括將視頻數據傳輸到頭戴式顯示器以在頭戴式顯示器內顯示虛擬現實場景。所述方法還包括從頭戴式顯示器內的一個或多個慣性傳感器接收慣性傳感器數據。慣性傳感器數據指示頭戴式顯示器根據佩戴所述頭戴式顯示器的用戶移動的移動。用戶的移動基于顯示在頭戴式顯示器內的虛擬現實場景。所述方法還包括使接收的慣性傳感器數據與虛擬現實場景內的動作關聯。所述方法還包括產生虛擬現實場景的更新以反映動作的實現。

在示例性實施方案中，一種方法包括在頭戴式顯示器處接收視頻數據。視頻數據定義虛擬現實場景。所述方法還包括在頭戴式顯示器內顯示虛擬現實場景。所述方法還包括操作頭戴式顯示器內的一個或多個慣性傳感器來產生慣性傳感器數據，所述慣性傳感器數據指示頭戴式顯示器根據佩戴所述頭戴式顯示器的用戶移動的移動。用戶的移動對應于虛擬現實場景內的動作。所述方法還包括將慣性傳感器數據傳輸到視頻數據從其接收的計算系統。所述方法還包括從計算系統接收視頻數據，所述視頻數據定義反映虛擬現實場景內的對應于用戶移動的動作的更新的虛擬現實場景。所述方法還包括在頭戴式顯示器內顯示更新的虛擬現實場景。

在示例性實施方案中，一種系統包括慣性數據處理模塊，所述慣性數據處理模塊被配置來從頭戴式顯示器接收慣性傳感器數據。慣性傳感器數據指示頭戴式顯示器根據佩戴所述頭戴式顯示器的用戶移動的移動。用戶的移動基于顯示在頭戴式顯示器內的虛擬現實場景。慣性數據處理模塊被配置來根據慣性傳感器數據確定頭戴式顯示器的移動路徑和頭戴式顯示器的移動速率。所述系統還包括慣性數據關聯模塊，所述慣性數據關聯模塊被配置來使頭戴式顯示器的移動路徑和頭戴式顯示器的移動速率與虛擬現實場景內的動作關聯。所述系統還包括慣性數據命令輸出模塊，所述慣性數據命令輸出模塊被配置來向渲染引擎提供命令信號。命令信號引導渲染引擎來更新虛擬現實場景以反映動作的實現。

在示例性實施方案中，一種方法包括將視頻數據傳輸到頭戴式顯示器以在頭戴式顯示器內顯示虛擬現實場景。頭戴式顯示器配備有一個或多個慣性傳感器，所述一個或多個慣性傳感器被配置來產生指示頭戴式顯示器根據佩戴所述頭戴式顯示器的用戶移動的移動的慣性傳感器數據。虛擬現實場景請求用戶做出示意動作來在虛擬現實場景內引發具體動作。示意動作引發頭戴式顯示器的移動和對應于頭戴式顯示器的移動的慣性傳感器數據的產生。所述方法還包括從頭戴式顯示器接收慣性傳感器數據。慣性傳感器數據指示頭戴式顯示器響應于用戶做出示意動作來在虛擬現實場景內引發具體動作的移動。所述方法還包括使接收的慣性傳感器數據與虛擬現實場景內的具體動作關聯，使得當隨后接收基本上等于先前接收的慣性傳感器數據的慣性傳感器數據時具體動作在虛擬現實場景內被執行。