[發明專利]用于空間交互中的額外模態的面部跟蹤

有效

• 申請號: 201480057721.4
• 申請日: 2014-11-07
• 公開（公告）號: CN105683868B
• 公開（公告）日: 2019-07-30
• 發明（設計）人: 哈特穆特·賽西特
• 申請（專利權）人: 高通股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0481;G06T19/00
• 代理公司: 北京律盟知識產權代理有限責任公司 11287
• 代理人: 宋獻濤

1.一種用于執行用戶與用戶裝置的空間交互的設備，其包括：

所述用戶裝置的至少一個處理器，其經配置以：

致使圖像跟蹤器在第一坐標系統中檢測及跟蹤所述用戶的面部相對于所述用戶裝置的位置及定向；

致使傳感器跟蹤器在第二坐標系統中檢測及跟蹤所述用戶裝置相對于目標的位置及定向；

將所述第一坐標系統和所述第二坐標系統映射到全局坐標系統；

基于所述用戶的所述面部的所述所檢測到的位置及定向、所述用戶裝置的所述所檢測到的位置及定向和所述全局坐標系統連續地跟蹤所述用戶的所述面部；

接收來自于所述用戶的包括面部姿態以及語音命令或手部姿態的輸入，其中至少部分地基于所述用戶的所述面部被連續地跟蹤而確定所述面部姿態；及

基于來自于所述用戶的所述輸入且基于所述用戶裝置的所述位置或定向操作顯示于所述用戶裝置的用戶界面上的所述目標的表示。

2.根據權利要求1所述的設備，其中所述傳感器跟蹤器經配置以：

檢測所述用戶裝置的移動；

跟蹤所述用戶裝置的移動；

檢測所述目標；或

連續地跟蹤所述目標的移動。

3.根據權利要求1所述的設備，其中所述圖像跟蹤器經配置以：

檢測所述用戶的所述面部；

跟蹤所述用戶的所述面部的移動；或

確定所述用戶是否已眨眼且基于所述用戶已眨眼觸發所述用戶裝置。

4.根據權利要求1所述的設備，所述至少一個處理器進一步經配置以解釋在所述用戶裝置前方的三個自由度和在所述用戶裝置后方的三個自由度。

5.根據權利要求1所述的設備，其中所述第一坐標系統為在所述用戶裝置前方的面部到裝置坐標系統。

6.根據權利要求1所述的設備，其中所述第二坐標系統為在所述用戶裝置后方的裝置到目標坐標系統。

7.根據權利要求1所述的設備，其中所述全局坐標系統包括現實世界坐標系統。

8.根據權利要求1所述的設備，其中所述圖像跟蹤器包括耦合于所述至少一個處理器的硬件組件，由所述至少一個處理器執行的軟件模塊，或者軟件與硬件的組合，且其中所述傳感器跟蹤器包括耦合于所述至少一個處理器的硬件組件，由所述至少一個處理器執行的軟件模塊，或者軟件與硬件的組合。

9.根據權利要求1所述的設備，其中所述至少一個處理器經配置以進行操作包括所述至少一個處理器經配置以顯示所述目標的所述表示的分解視圖。

10.根據權利要求1所述的設備，其中所述至少一個處理器經配置以進行操作包括所述至少一個處理器經配置以顯示所述目標的所述表示的X射線視圖。

11.根據權利要求1所述的設備，其中所述至少一個處理器經配置以改變所述目標的所述表示的細節水平。

12.根據權利要求11所述的設備，其中所述至少一個處理器經配置以基于所述用戶裝置的所述位置向所述用戶更接近地移動來增強所述目標的所述表示的所述細節水平。