[發(fā)明專利]在增強(qiáng)或虛擬現(xiàn)實(shí)環(huán)境中選擇對(duì)象

有效

• 申請(qǐng)?zhí)枺?/td>: 201711133573.1
• 申請(qǐng)日: 2017-11-15
• 公開(kāi)（公告）號(hào): CN108073280B
• 公開(kāi)（公告）日: 2022-08-19
• 發(fā)明（設(shè)計(jì)）人: 樊尚·阿洛姆;皮埃雷克·茹埃;馬蒂·弗雷德蒂
• 申請(qǐng)（專利權(quán)）人: 交互數(shù)字麥迪遜專利控股公司
• 主分類號(hào): G06F3/01
• 分類號(hào): G06F3/01;G06F3/04842
• 代理公司: 中科專利商標(biāo)代理有限責(zé)任公司 11021
• 代理人: 倪斌

提供了一種在包括多個(gè)真實(shí)和/或虛擬對(duì)象(8、10、12、14、16、18、20)的環(huán)境中選擇對(duì)象的方法，所述環(huán)境通過(guò)顯示設(shè)備(4)顯示給用戶(2)，其中所述方法包括向多個(gè)對(duì)象(8、10、12、14、16、18、20)中的每個(gè)對(duì)象分配手勢(shì)路徑，所述手勢(shì)路徑包括要由用戶(2)執(zhí)行以選擇該對(duì)象的一系列手勢(shì)。

技術(shù)領(lǐng)域

本發(fā)明總體涉及人機(jī)交互領(lǐng)域。

更具體地說(shuō)，本發(fā)明針對(duì)與包括真實(shí)對(duì)象和/或虛擬對(duì)象的增強(qiáng)或虛擬現(xiàn)實(shí)環(huán)境中的對(duì)象的用戶交互。

因此，本發(fā)明涉及一種在環(huán)境中選擇對(duì)象的方法和相應(yīng)的選擇設(shè)備。本發(fā)明還涉及實(shí)現(xiàn)本發(fā)明的選擇方法的計(jì)算機(jī)程序。

背景技術(shù)

本部分中描述的內(nèi)容可能在進(jìn)行，但不一定是之前已經(jīng)構(gòu)思或進(jìn)行的內(nèi)容。因此，除非在本文中另行指示，否則在本部分中所描述的內(nèi)容不是本申請(qǐng)權(quán)利要求的現(xiàn)有技術(shù)，并且不因包含在本部分中而被承認(rèn)為現(xiàn)有技術(shù)。

與諸如計(jì)算機(jī)、智能電話和平板電腦等多媒體設(shè)備的常見(jiàn)用戶交互通常依賴于用戶輸入，如鍵盤事件、鼠標(biāo)事件以及諸如捏合、縮放、觸摸等屏幕觸摸事件。

其他交互也正變得很普遍，如語(yǔ)音命令和手勢(shì)命令，它們經(jīng)常用作間接觸發(fā)，因?yàn)橥ǔＰ枰治鱿嚓P(guān)背景以引起用戶期望的動(dòng)作。

這種背景通常可以與用戶當(dāng)前使用的特定應(yīng)用有關(guān)并有可能受到所述特定應(yīng)用的限制。在這種情況下，所考慮的背景例如包括用戶所做的最近查詢或上次打開(kāi)的菜單。

背景還可以包括直接用戶環(huán)境，諸如用戶在房間中的物理位置以及房間中存在的物品，因?yàn)橛脩艨梢酝ㄟ^(guò)他的肉眼或者使用透視設(shè)備或頭戴式顯示器(HMD)來(lái)感知這些信息。圖1中示出了包括直接用戶環(huán)境中的真實(shí)對(duì)象的背景的示例。

在圖1的示例中，配備有頭戴式顯示器4的用戶2可以與位于房間6中的大量真實(shí)對(duì)象進(jìn)行交互。例如，這些對(duì)象包括放置在桌子7上的對(duì)象，例如，攝像機(jī)8和報(bào)紙10。

此外，在諸如改變現(xiàn)實(shí)或虛擬現(xiàn)實(shí)應(yīng)用之類的一些情況下，背景可以包括來(lái)自用戶周圍的真實(shí)和/或虛擬對(duì)象。在圖2中示出了這種背景的示例。

改變現(xiàn)實(shí)意味著增強(qiáng)現(xiàn)實(shí)(也稱為混合現(xiàn)實(shí))情況(即，場(chǎng)景中存在真實(shí)對(duì)象加上一些虛擬對(duì)象)以及改變(例如，在尺寸、顏色、存在或位置方面)用戶直接看到或通過(guò)使用諸如透視眼鏡等設(shè)備看到的真實(shí)對(duì)象的情況。

在圖2的示例中，配備有頭戴式顯示器4的用戶2可以與真實(shí)對(duì)象8、10交互。用戶2也可以與位于房間6中的虛擬對(duì)象交互。例如，虛擬對(duì)象包括地球儀12、游戲柄14、均衡器16、角色18和齒輪20。這些虛擬對(duì)象可以與頭戴式顯示器4中的應(yīng)用相關(guān)。例如，虛擬對(duì)象可以用作可用應(yīng)用的化身，或可以被激活以觸發(fā)一些相關(guān)應(yīng)用程序的元素的化身，例如，用于游戲開(kāi)啟的游戲柄14。

在用戶的直接環(huán)境中存在多個(gè)真實(shí)和/或虛擬對(duì)象的情況下，用戶可能需要具體指示他打算與之交互的對(duì)象。這種對(duì)對(duì)象的選擇需要非常準(zhǔn)確，以避免由于選擇錯(cuò)誤對(duì)象而誤解用戶意圖。

在常見(jiàn)游戲中，這種互動(dòng)的觸發(fā)一次限于幾個(gè)對(duì)象。對(duì)象的數(shù)量通常與玩家使用的游戲柄的按鈕數(shù)量相關(guān)聯(lián)。一些游戲(例如Play Station 3和Play Station 4游戲機(jī)中的Heavy Rain Move Edition)在游戲場(chǎng)景中使用特定控制設(shè)備和精細(xì)調(diào)整布局的對(duì)象。

文獻(xiàn)US2013/0328925描述了一種用于在混合現(xiàn)實(shí)環(huán)境中解釋用戶關(guān)注虛擬對(duì)象的系統(tǒng)。該系統(tǒng)包括耦接到一個(gè)或多個(gè)處理單元的透視頭戴式顯示設(shè)備。與該頭戴式顯示單元協(xié)作的處理單元可以向用戶顯示一個(gè)或多個(gè)虛擬對(duì)象，也稱為全息對(duì)象。用戶可以與所顯示的虛擬對(duì)象進(jìn)行交互。通過(guò)使用推理、表達(dá)手勢(shì)和啟發(fā)式規(guī)則，該系統(tǒng)確定用戶可能關(guān)注且與之交互的虛擬對(duì)象。此時(shí)，系統(tǒng)可以相比于其他虛擬對(duì)象強(qiáng)調(diào)所選的虛擬對(duì)象，并以各種方式與所選的虛擬對(duì)象進(jìn)行交互。