[發明專利]用戶界面設備和用戶界面方法

有效

• 申請號: 201380052301.2
• 申請日: 2013-06-20
• 公開（公告）號: CN104704449B
• 公開（公告）日: 2017-09-12
• 發明（設計）人: 永井克幸;森下幸司;野田尚志
• 申請（專利權）人: 日本電氣方案創新株式會社
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06F3/0346
• 代理公司: 中原信達知識產權代理有限責任公司11219
• 代理人: 韓峰,孫志湧

技術領域

本發明涉及用戶界面技術。

背景技術

作為啟用關于計算機的用戶輸入的用戶界面(人機界面)設備，已經提供了諸如鼠標、操縱桿、跟蹤球、以及觸控板的多種裝置。近年來，還開發了通過檢測身體活動(手勢)響應于身體運動啟用用戶輸入的用戶界面設備，諸如數據手套、數據衣等。用戶可以通過這樣的用戶界面設備利用直覺感覺操作計算機。

例如，在以下描述的PTL 1中，提出通過用戶的手勢促進操作輸入的技術。通過所提出的技術，基于距離傳感器的分辨率、顯示器的三維顯示性能、以及在深度方向上諸如用戶的手的手指的指示點的測量距離，調節用于確定檢測深度方向上的指示點的運動的敏感度的參數。然后，通過基于調節后的參數計算深度方向上的指示點的距離，識別通過用戶的手勢的操作輸入。

[引用列表]

[專利文獻]

[PTL 1]日本未審查專利申請公開No.2012-137989

發明內容

[技術問題]

然而，上述提出的方法僅假設對應于諸如手的手指的身體的特定部分(指示點，instruction point)的運動的用戶輸入，并且不假設對應于在定點操作中使用的用戶的特定部位的形狀(狀態)的變化的用戶輸入，諸如，用手抓住物體的運動和通過手指握持物體的運動。

本發明考慮這些情況被做出，并且提供通過包括用戶的特定部位的形狀的變化的手勢在直覺上和簡單地操作計算機的用戶界面技術。

[技術方案]

為了解決上述問題，本發明的多個方面采用以下結構。

第一方面涉及用戶界面設備。根據第一方面的用戶界面設備包括：位置獲取單元，其按順序地獲取表示在定點操作中使用的用戶的特定部位的至少一個代表性位置的定點位置；變化檢測單元，其檢測用戶的特定部位的預定形狀的變化開始和變化結束；位置存儲單元，其存儲由位置獲取單元順序獲取的定點位置中的對應于由變化檢測單元檢測到的變化開始的時間的定點位置；計算單元，其指定由位置獲取單元獲取的定點位置中的對應于由變化檢測單元檢測到的變化結束的時間的定點位置，并且計算指定定點位置和存儲在位置存儲單元中的定點位置之間的差異；以及位置調節單元，其使用由計算單元計算的差異，調節由位置獲取單元獲取的定點位置。

第二方面涉及用戶界面方法。在根據第二方面的用戶界面方法中，至少一個計算機按順序地獲取表示在定點操作中使用的用戶的特定部位的至少一個代表性位置的定點位置；檢測用戶的特定部位的預定形狀的變化開始和變化結束；存儲順序獲取的定點位置中的對應于所檢測到的變化開始的時間的定點位置；指定順序獲取的定點位置中的對應于所檢測到的變化結束的時間的定點位置；計算指定定點位置和所存儲定點位置之間的差異；以及使用所計算的差異，調節順序獲取的定點位置。

注意，其它方面可以是使得至少一個計算機實現以上第一方面中的各自結構的程序或者記錄這樣的程序的計算機可讀記錄介質。記錄介質包括非暫時性有形介質。

[有益效果]

根據上述各個方面，可以提供通過包括用戶的特定部位的形狀的變化的手勢，在直覺上并且簡單地操作計算機的用戶界面技術。

附圖說明

上述目標和其它目標、特征以及優點將從以下描述的優選示例性實施例和以下附圖更加明顯。

[圖1]圖1是概念性地示出定點位置的獲得的視圖。

[圖2]圖2是概念性地示出定點位置的獲取的問題的視圖。

[圖3]圖3是概念性地示出示例性實施例中的定點位置的調節的視圖。

[圖4]圖4是概念性地示出第一示例性實施例中的三維用戶界面設備(3D-UI設備)的硬件結構實例的視圖。

[圖5]圖5是示出第一示例性實施例中的三維用戶界面設備(3D-UI設備)的利用形式的實例的視圖。

[圖6]圖6是示出HMD的外部結構的實例的視圖。

[圖7]圖7是概念性地示出第一示例性實施例中的傳感器側設備的功能結構實例的視圖。

[圖8]圖8是概念性地示出第一示例性實施例中的顯示器側設備的功能結構實例的視圖。

[圖9]圖9是示出顯示在HMD上的合成圖像的實例的視圖。

[圖10]圖10是示出第一示例性實施例中的三維用戶界面設備(3D-UI設備)的操作實例的序列圖。

[圖11]圖11是示出圖10中所示的步驟(S106)的詳情的流程圖。

[圖12]圖12是概念性地示出第二示例性實施例中的三維用戶界面設備(3D-UI設備)的功能結構實例的視圖。