[發(fā)明專利]用于空間交互中的額外模態(tài)的面部跟蹤

有效

• 申請?zhí)枺?/td>: 201480057721.4
• 申請日: 2014-11-07
• 公開（公告）號: CN105683868B
• 公開（公告）日: 2019-07-30
• 發(fā)明（設計）人: 哈特穆特·賽西特
• 申請（專利權）人: 高通股份有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0481;G06T19/00
• 代理公司: 北京律盟知識產(chǎn)權代理有限責任公司 11287
• 代理人: 宋獻濤

1.一種用于執(zhí)行用戶與用戶裝置的空間交互的設備，其包括：

所述用戶裝置的至少一個處理器，其經(jīng)配置以：

致使圖像跟蹤器在第一坐標系統(tǒng)中檢測及跟蹤所述用戶的面部相對于所述用戶裝置的位置及定向；

致使傳感器跟蹤器在第二坐標系統(tǒng)中檢測及跟蹤所述用戶裝置相對于目標的位置及定向；

將所述第一坐標系統(tǒng)和所述第二坐標系統(tǒng)映射到全局坐標系統(tǒng)；

基于所述用戶的所述面部的所述所檢測到的位置及定向、所述用戶裝置的所述所檢測到的位置及定向和所述全局坐標系統(tǒng)連續(xù)地跟蹤所述用戶的所述面部；

接收來自于所述用戶的包括面部姿態(tài)以及語音命令或手部姿態(tài)的輸入，其中至少部分地基于所述用戶的所述面部被連續(xù)地跟蹤而確定所述面部姿態(tài)；及

基于來自于所述用戶的所述輸入且基于所述用戶裝置的所述位置或定向操作顯示于所述用戶裝置的用戶界面上的所述目標的表示。

2.根據(jù)權利要求1所述的設備，其中所述傳感器跟蹤器經(jīng)配置以：

檢測所述用戶裝置的移動；

跟蹤所述用戶裝置的移動；

檢測所述目標；或

連續(xù)地跟蹤所述目標的移動。

3.根據(jù)權利要求1所述的設備，其中所述圖像跟蹤器經(jīng)配置以：

檢測所述用戶的所述面部；

跟蹤所述用戶的所述面部的移動；或

確定所述用戶是否已眨眼且基于所述用戶已眨眼觸發(fā)所述用戶裝置。

4.根據(jù)權利要求1所述的設備，所述至少一個處理器進一步經(jīng)配置以解釋在所述用戶裝置前方的三個自由度和在所述用戶裝置后方的三個自由度。

5.根據(jù)權利要求1所述的設備，其中所述第一坐標系統(tǒng)為在所述用戶裝置前方的面部到裝置坐標系統(tǒng)。

6.根據(jù)權利要求1所述的設備，其中所述第二坐標系統(tǒng)為在所述用戶裝置后方的裝置到目標坐標系統(tǒng)。

7.根據(jù)權利要求1所述的設備，其中所述全局坐標系統(tǒng)包括現(xiàn)實世界坐標系統(tǒng)。

8.根據(jù)權利要求1所述的設備，其中所述圖像跟蹤器包括耦合于所述至少一個處理器的硬件組件，由所述至少一個處理器執(zhí)行的軟件模塊，或者軟件與硬件的組合，且其中所述傳感器跟蹤器包括耦合于所述至少一個處理器的硬件組件，由所述至少一個處理器執(zhí)行的軟件模塊，或者軟件與硬件的組合。

9.根據(jù)權利要求1所述的設備，其中所述至少一個處理器經(jīng)配置以進行操作包括所述至少一個處理器經(jīng)配置以顯示所述目標的所述表示的分解視圖。

10.根據(jù)權利要求1所述的設備，其中所述至少一個處理器經(jīng)配置以進行操作包括所述至少一個處理器經(jīng)配置以顯示所述目標的所述表示的X射線視圖。

11.根據(jù)權利要求1所述的設備，其中所述至少一個處理器經(jīng)配置以改變所述目標的所述表示的細節(jié)水平。

12.根據(jù)權利要求11所述的設備，其中所述至少一個處理器經(jīng)配置以基于所述用戶裝置的所述位置向所述用戶更接近地移動來增強所述目標的所述表示的所述細節(jié)水平。