[發(fā)明專(zhuān)利]一種基于手勢(shì)的交互方法及裝置

在審

• 申請(qǐng)?zhí)枺?/td>: 201610866367.0
• 申請(qǐng)日: 2016-09-29
• 公開(kāi)（公告）號(hào): CN107885317A
• 公開(kāi)（公告）日: 2018-04-06
• 發(fā)明（設(shè)計(jì)）人: 張磊;彭俊
• 申請(qǐng)（專(zhuān)利權(quán)）人: 阿里巴巴集團(tuán)控股有限公司
• 主分類(lèi)號(hào): G06F3/01
• 分類(lèi)號(hào): G06F3/01;G06F3/0487
• 代理公司: 北京同達(dá)信恒知識(shí)產(chǎn)權(quán)代理有限公司11291
• 代理人: 劉醒晗

技術(shù)領(lǐng)域

本申請(qǐng)涉及計(jì)算機(jī)技術(shù)領(lǐng)域，尤其涉及一種基于手勢(shì)的交互方法及裝置。

背景技術(shù)

虛擬現(xiàn)實(shí)(Virtual Reality，簡(jiǎn)稱(chēng)VR)技術(shù)是一種可以創(chuàng)建和體驗(yàn)虛擬世界的計(jì)算機(jī)仿真技術(shù)。它利用計(jì)算機(jī)生成一種模擬環(huán)境，是一種多源信息融合的交互式的三維動(dòng)態(tài)視景和實(shí)體行為的系統(tǒng)仿真，使用戶沉浸到該環(huán)境中。虛擬現(xiàn)實(shí)技術(shù)是仿真技術(shù)與計(jì)算機(jī)圖形學(xué)人機(jī)接口技術(shù)、多媒體技術(shù)、傳感技術(shù)、網(wǎng)絡(luò)技術(shù)等多種技術(shù)的集合。虛擬現(xiàn)實(shí)技術(shù)可以根據(jù)的頭部轉(zhuǎn)動(dòng)、眼睛、手勢(shì)或其他人體行為動(dòng)作，由計(jì)算機(jī)來(lái)處理與參與者的動(dòng)作相適應(yīng)的數(shù)據(jù)，并對(duì)用戶的輸入作出實(shí)時(shí)響應(yīng)。

增強(qiáng)現(xiàn)實(shí)(Augmented Reality，簡(jiǎn)稱(chēng)AR)技術(shù)通過(guò)計(jì)算機(jī)技術(shù)，將虛擬的信息應(yīng)用到真實(shí)世界，真實(shí)的環(huán)境和虛擬的物體實(shí)時(shí)地疊加到了同一個(gè)畫(huà)面或空間同時(shí)存在。

混合現(xiàn)實(shí)(Mix reality，簡(jiǎn)稱(chēng)MR)技術(shù)包括增強(qiáng)現(xiàn)實(shí)和增強(qiáng)虛擬，指的是合并現(xiàn)實(shí)和虛擬世界而產(chǎn)生的新的可視化環(huán)境。在新的可視化環(huán)境中，物理和虛擬對(duì)象(也即數(shù)字對(duì)象)共存，并實(shí)時(shí)互動(dòng)。

基于VR、AR或MR的技術(shù)中，一個(gè)應(yīng)用中可能存在多種業(yè)務(wù)場(chǎng)景，相同用戶手勢(shì)在不同業(yè)務(wù)場(chǎng)景中需要實(shí)現(xiàn)的操作可能不同。目前，針對(duì)這種多場(chǎng)景應(yīng)用，如何實(shí)現(xiàn)基于手勢(shì)的交互，尚未有解決方案。

發(fā)明內(nèi)容

本申請(qǐng)實(shí)施例提供了一種基于手勢(shì)的交互方法及裝置，用以實(shí)現(xiàn)多業(yè)務(wù)場(chǎng)景下的基于手勢(shì)的交互。

本申請(qǐng)實(shí)施例提供的一種基于手勢(shì)的交互方法，包括：

顯示第一圖像，所述第一圖像包括：虛擬現(xiàn)實(shí)圖像、增強(qiáng)現(xiàn)實(shí)圖像、混合現(xiàn)實(shí)圖像中的一種或多種組合；

獲取第一手勢(shì)；

確定所述第一圖像對(duì)應(yīng)的業(yè)務(wù)場(chǎng)景下所述第一手勢(shì)對(duì)應(yīng)的第一操作；

響應(yīng)所述第一操作。

本申請(qǐng)實(shí)施例提的另一種基于手勢(shì)的交互方法，包括：

在虛擬現(xiàn)實(shí)場(chǎng)景、增強(qiáng)現(xiàn)實(shí)場(chǎng)景或混合現(xiàn)實(shí)場(chǎng)景下，獲取第一手勢(shì)；

若確定所述第一手勢(shì)滿足觸發(fā)條件，則控制數(shù)據(jù)的輸出，所述數(shù)據(jù)包括：音頻數(shù)據(jù)、圖像數(shù)據(jù)、視頻數(shù)據(jù)之一或組合。

本申請(qǐng)實(shí)施例提供的另一種基于手勢(shì)的交互方法，包括：

顯示第一圖像，所述第一圖像包括：第一對(duì)象和第二對(duì)象，所述第一對(duì)象和第二對(duì)象中至少一個(gè)為：虛擬現(xiàn)實(shí)對(duì)象、增強(qiáng)現(xiàn)實(shí)對(duì)象或混合現(xiàn)實(shí)對(duì)象；

獲取輸入的第一手勢(shì)信號(hào)；其中，所述第一手勢(shì)信號(hào)與所述第一對(duì)象關(guān)聯(lián)；

根據(jù)所述第一手勢(shì)對(duì)應(yīng)的第一操作，對(duì)所述第二對(duì)象進(jìn)行處理。

本申請(qǐng)實(shí)施例提供的另一種基于手勢(shì)的交互方法，包括：

獲取發(fā)送的交互操作信息，所述交互操作信息中包括手勢(shì)信息以及基于所述手勢(shì)信息所執(zhí)行的操作；

根據(jù)所述交互操作信息以及所述交互操作信息對(duì)應(yīng)的業(yè)務(wù)場(chǎng)景，更新相應(yīng)業(yè)務(wù)場(chǎng)景對(duì)應(yīng)的交互模型，所述交互模型用于根據(jù)手勢(shì)確定對(duì)應(yīng)的操作；

返回更新后的交互模型。

本申請(qǐng)實(shí)施例提供的一種基于手勢(shì)的交互裝置，包括：

顯示模塊，用于顯示第一圖像，所述第一圖像包括：虛擬現(xiàn)實(shí)圖像、增強(qiáng)現(xiàn)實(shí)圖像、混合現(xiàn)實(shí)圖像中的一種或多種組合；

獲取模塊，用于獲取第一手勢(shì)；

確定模塊，用于確定所述第一圖像對(duì)應(yīng)的業(yè)務(wù)場(chǎng)景下所述第一手勢(shì)對(duì)應(yīng)的第一操作；

響應(yīng)模塊，用于響應(yīng)所述第一操作。

本申請(qǐng)實(shí)施例提供的另一種基于手勢(shì)的交互裝置，包括：

獲取模塊，用于在虛擬現(xiàn)實(shí)場(chǎng)景、增強(qiáng)現(xiàn)實(shí)場(chǎng)景或混合現(xiàn)實(shí)場(chǎng)景下，獲取第一手勢(shì)；

處理模塊，用于若確定所述第一手勢(shì)滿足觸發(fā)條件，則控制數(shù)據(jù)的輸出，所述數(shù)據(jù)包括：音頻數(shù)據(jù)、圖像數(shù)據(jù)、視頻數(shù)據(jù)之一或組合。

本申請(qǐng)實(shí)施例提供的另一種基于手勢(shì)的交互裝置，包括：

顯示模塊，用于顯示第一圖像，所述第一圖像包括：第一對(duì)象和第二對(duì)象，所述第一對(duì)象和第二對(duì)象中至少一個(gè)為：虛擬現(xiàn)實(shí)對(duì)象、增強(qiáng)現(xiàn)實(shí)對(duì)象或混合現(xiàn)實(shí)對(duì)象；

獲取模塊，用于獲取輸入的第一手勢(shì)信號(hào)；其中，所述第一手勢(shì)信號(hào)與所述第一對(duì)象關(guān)聯(lián)；

處理模塊，用于根據(jù)所述第一手勢(shì)對(duì)應(yīng)的第一操作，對(duì)所述第二對(duì)象進(jìn)行處理。

本申請(qǐng)實(shí)施例提供的另一種基于手勢(shì)的交互裝置，包括：

接收模塊，用于獲取發(fā)送的交互操作信息，所述交互操作信息中包括手勢(shì)信息以及基于所述手勢(shì)信息所執(zhí)行的操作；