[發明專利]用圖像投影的虛擬交互

有效

• 申請號: 201480005569.5
• 申請日: 2014-01-15
• 公開（公告）號: CN105283824B
• 公開（公告）日: 2018-06-05
• 發明（設計）人: R·貝內特;A·阿哈羅尼
• 申請（專利權）人: 微軟技術許可有限責任公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/03;G06F3/0481;G06F3/0484
• 代理公司: 上海專利商標事務所有限公司 31100
• 代理人: 顧嘉運

1.一種用于在虛擬環境中提供低等待時間交互的接口系統，所述接口系統包括：

由計算設備的處理器執行的接口程序，所述接口程序被配置成：

接收用戶手部的背面的初始圖像以及表示所述手部的初始實際位置的對應的初始深度信息；

使用所述初始深度信息，將所述初始圖像投影到所述虛擬環境中的初始虛擬位置，所述初始虛擬位置對應于所述初始實際位置；

向顯示設備提供所述初始圖像的分割版本以供顯示在所述虛擬環境中的所述初始虛擬位置；

接收所述用戶手部的背面的后續圖像以及表示與所述初始實際位置不同的所述手部的后續實際位置的對應的后續深度信息；

使用所述后續深度信息，將所述后續圖像投影到所述虛擬環境中的后續虛擬位置，所述后續虛擬位置對應于所述后續實際位置；

向所述顯示設備提供所述后續圖像的分割版本以供顯示在所述虛擬環境中的所述后續虛擬位置；以及

檢測所述手部的三維表示與所述虛擬環境中的虛擬對象或物理對象之間的觸碰。

2.如權利要求1所述的接口系統，其特征在于，所述接口程序被配置成將所述初始圖像的分割版本和所述后續圖像的分割版本提供給所述顯示設備以供以其中所述手部在所述虛擬環境中大致向上伸展的虛擬定向顯示，而不管所述用戶手部的所述初始實際位置和所述后續實際位置。

3.如權利要求1所述的接口系統，其特征在于，所述接口程序被進一步配置成從具有捕捉所述用戶手部的背面的視野的捕捉設備接收所述用戶手部的背面的初始圖像。

4.如權利要求3所述的接口系統，其特征在于：

所述初始實際位置與所述捕捉設備隔開初始實際距離，且所述后續實際位置與所述捕捉設備隔開不同于所述初始實際距離的后續實際距離；并且

所述初始虛擬位置與所述虛擬對象或所述物理對象隔開虛擬距離，且所述后續虛擬位置與所述虛擬對象或所述物理對象隔開所述虛擬距離。

5.如權利要求3所述的接口系統，其特征在于，所述捕捉設備位于頭戴式顯示設備上。

6.一種用于在虛擬環境中提供低等待時間交互的方法，所述方法包括：

接收用戶手部的背面的初始圖像以及表示所述手部的初始實際位置的對應的初始深度信息；

使用所述初始深度信息，將所述初始圖像投影到所述虛擬環境中的初始虛擬位置，所述初始虛擬位置對應于所述初始實際位置；

向顯示設備提供所述初始圖像的分割版本以供顯示在所述虛擬環境中的所述初始虛擬位置；

接收所述用戶手部的背面的后續圖像以及表示與所述初始實際位置不同的所述手部的后續實際位置的對應的后續深度信息；

使用所述后續深度信息，將所述后續圖像投影到所述虛擬環境中的后續虛擬位置，所述后續虛擬位置對應于所述后續實際位置；

向所述顯示設備提供所述后續圖像的分割版本以供顯示在所述虛擬環境中的所述后續虛擬位置；以及

檢測所述手部的三維表示與所述虛擬環境中的虛擬對象或物理對象之間的觸碰。

7.如權利要求6所述的方法，其特征在于，進一步包括在檢測到所述觸碰之際向所述顯示設備提供觸碰感官提示。

8.如權利要求6所述的方法，其特征在于，進一步包括向所述顯示設備提供對應于所述用戶手部在所述虛擬環境中的虛擬位置的位置感官提示。

9.如權利要求6所述的方法，其特征在于，進一步包括在檢測到所述用戶手部的虛擬位置在所述虛擬對象或所述物理對象的預定鄰近度內之際向所述顯示設備提供位置感官提示。

10.如權利要求6所述的方法，其特征在于，進一步包括：

接收與所述用戶手部的背面的后續圖像的重新映射的虛擬位置有關的用戶輸入；

基于所述用戶輸入，將所述后續圖像投影到所述虛擬環境中的所述重新映射的虛擬位置；以及

向所述顯示設備提供所述后續圖像的分割版本以供顯示在所述虛擬環境中的所述重新映射的虛擬位置。